Серверный парсер выдачи Яндекса через XML интерфейс

(Ответов: 9, Просмотров: 4396)
  1. Новичок Аватар для Codd
    • Регистрация: 09.01.2011
    • Сообщений: 13
    • Репутация: 22
    • Webmoney BL: ?
    Парсер парсит выдачу через XML интерфейс, благодаря чему вам не требуется искать прокси, ставить таймауты и вводить каптчи - всё происходит "официально".

    Для юзания парсера, вам необходимо зарегистрироваться в Яндекс.XML. После регистрации вам будет доступен лимит в 10 запросов в сутки, для его увеличения до 1000, необходимо указать и подтвердить телефонный номер. После чего в настройках вы должны получить ссылку для совершения запросов и зарегистрировать IP адрес, с которого будут совершаться запросы.

    Результаты парсинга сохраняются в csv файл (excel).
    В выходной файл попадают данные: url, domain, title, modtime, size, charset, mime-type, lang, passage, saved-copy-url.

    Скачать ya_xml_parser

    • 1

    Спасибо сказали:

    Atari(12.01.2012),
  2. Опытный Аватар для r00t
    • Регистрация: 23.06.2011
    • Сообщений: 253
    • Репутация: 60
    есть возможность выбора региона или регион берется из "местоположения"?!?
    • 0
  3. Разработка любых сайтов Аватар для ArhStrAngeR
    • Регистрация: 08.06.2011
    • Сообщений: 3,375
    • Записей в дневнике: 1
    • Репутация: 2506
    а нет ли такого, чтобы вбить определенный запрос и просто отображать результаты выдачи на блоге? в хтмл страничке
    • 0
  4. Новичок Аватар для Codd
    • Регистрация: 09.01.2011
    • Сообщений: 13
    • Репутация: 22
    • Webmoney BL: ?
    r00t, для задания региона необходимо добавить к адресу для совершения запросов параметр &lr=[индекс региона], например для Москвы ссылка будет выглядеть
    http://xmlsearch.yandex.ru/xmlsearch...1651ec2&lr=213
    Индексы регионов http://search.yaca.yandex.ru/geo.c2n

    ArhStrAngeR, готового не видел.
    • 1

    Спасибо сказали:

    Atari(12.01.2012),
  5. Software Engineer Аватар для Zvеr
    • Регистрация: 07.02.2010
    • Сообщений: 603
    • Репутация: 228
    • Webmoney BL: ?
    Codd а больше чем 1к запросов можно как-нибудь выполнить?
    • 0
  6. Новичок Аватар для Codd
    • Регистрация: 09.01.2011
    • Сообщений: 13
    • Репутация: 22
    • Webmoney BL: ?
    Zvеr, это лимит, устанавливаемый яндексом. Лимит можно увеличить, только став участником РСЯ.
    Как вариант, можно зарегистрировать несколько акков, и получить несколько адресов для запросов.
    • 1

    Спасибо сказали:

    Atari(12.01.2012),
  7. Опытный Аватар для r00t
    • Регистрация: 23.06.2011
    • Сообщений: 253
    • Репутация: 60
    попробовал спарсить выдачу - ничего не получается. Взял идентификатор, добавил ip в яндекс, ввел парочку запросов и... ничего не произошло
    Парсер показывает

    и дальше ничего не происходит.
    кто знает в чем проблема?!?
    • 0
  8. Новичок Аватар для Codd
    • Регистрация: 09.01.2011
    • Сообщений: 13
    • Репутация: 22
    • Webmoney BL: ?
    r00t, скачайте парсер заново. Я вносил небольшие исправления, связанные как раз с тем, что не отображались сообщения об ошибках, полученные от яндекса.
    • 2

    Спасибо сказали:

    Atari(12.01.2012), r00t(29.11.2011),
  9. Опытный
    • Регистрация: 27.08.2011
    • Сообщений: 443
    • Репутация: 62
    r00t,та же проблема. запускается но не парсит. ТС поправьте пожалуйста парсер
    • 0
  10. Новичок Аватар для Codd
    • Регистрация: 09.01.2011
    • Сообщений: 13
    • Репутация: 22
    • Webmoney BL: ?
    Если парсер останавливается после первого запроса, то вероятнее всего на сервере отсутствует Curl. Если юзаете на локалке и локалка=Denwer, то рекомендую поменять его на Open Server .
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Парсер выдачи яндекса
Софт, скрипты, сервисы 16 27.02.2015 20:21
Парсер Яндекса на ZennoPoster-е
Софт, скрипты, сервисы 2 02.08.2011 17:34
Анализ выдачи яндекса
Софт, скрипты, сервисы 3 04.01.2010 04:56
Парсер выдачи Yahoo or Google
Софт, скрипты, сервисы 11 11.09.2009 19:29

Интересные темы

парсер товаров

Может ли парсер товаров избавить меня от затрат на копирайтеров, которые добавляют описания товаров в моем магазине.

парсер форумов

Идеальный парсер форумов, он существует? Лучше ручного парсинга ничего нет или софт помогает?

парсер файлов

Как подобрать лучший парсер файлов для своих нужд. Полный обзор популярных парсеров здесь.

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры