Парсер выдачи Yahoo or Google

(Ответов: 11, Просмотров: 5829)
Страница 1 из 2 12 Последняя
  1. Member
    • Регистрация: 09.09.2009
    • Сообщений: 64
    • Репутация: 10
    Необходимо спарсить ссылки одной из этих пс. Чувствую, гугл настроил слишком много преград для осущствления моих планов, но гдето читал, что яха более лоялен.
    Перепробовал множество старых гугловских - все бестолку. Umax SEP - парсит, но только первые 5 страниц (если я канечно всё правильно делаю).
    Чудо-штуками навроде алсаба и хрумера не обладаю, нигде толковой инфы по этой теме не нашел...
    Быть может, есть готовые классы или скрипты? Не хочется изобретать велосипед с новой наклейкой, и так их уже изрядно мной наделано.
    • 0
  2. Гуру Аватар для 24110
    • Регистрация: 07.09.2009
    • Сообщений: 1,649
    • Репутация: 91
    Десктопный софт есть - Agress Parser.
    Парам-пам-пам!
    • 0

    Спасибо сказали:

    freeL(11.09.2009),
  3. Member
    • Регистрация: 09.09.2009
    • Сообщений: 64
    • Репутация: 10
    Пользовал его - у гугла спарсил очень мало, а с яхой вообще глухо.
    • 0
  4. Senior Member Аватар для RichardBeeter
    • Регистрация: 04.09.2009
    • Сообщений: 574
    • Репутация: 23
    Google наверняка можно парсить Allsubmitter'ом, сам парсю регулярно, а яху, по идее тоже возможно...
    • 0
  5. Опытный Аватар для LIME
    • Регистрация: 02.09.2009
    • Сообщений: 420
    • Репутация: 16
    Цитата Сообщение от freeL Посмотреть сообщение
    Пользовал его - у гугла спарсил очень мало, а с яхой вообще глухо.
    Так наверное без прокси парсил. Через какое-то время парсинга, особенно по операторам, гугл каптчу выдает. Поэтому надо парсить через прокси или по датацентрам. А лучше и то и другое сразу.
    • 0

    Спасибо сказали:

    freeL(11.09.2009),
  6. Banned
    • Регистрация: 08.09.2009
    • Сообщений: 53
    • Репутация: 10
    Agress Parser - самый адекватный бесплатный вариант парсера, главное разобратся с проксями и в бой
    • 0

    Спасибо сказали:

    freeL(11.09.2009),
  7. Member
    • Регистрация: 09.09.2009
    • Сообщений: 64
    • Репутация: 10
    Ясно, я ставил задержку между запросами в 30с, видимо этого мало.
    Еще вопрос - как обойти максимум гугла в 1к ссылок?
    • 0
  8. Гуру Аватар для 24110
    • Регистрация: 07.09.2009
    • Сообщений: 1,649
    • Репутация: 91
    Операторами запросов Гугла. Сначала выбрали 1к, потом исключаешь определенный признак и выбираешь дальше.
    Парам-пам-пам!
    • 0

    Спасибо сказали:

    freeL(11.09.2009),
  9. Member
    • Регистрация: 09.09.2009
    • Сообщений: 64
    • Репутация: 10
    Что то гугл занемог, отказался парсится вовсе. Яха неплохо пошла.
    На счет проблемы с гуглом - грешил на google.txt, попробовал несколько других, найденных в инете, но проверил вручную запрос, подставляя в {REQUEST} нужный запрос, всё было нормально. Кто нибуть сталкивался?
    • 0
  10. Banned
    • Регистрация: 08.09.2009
    • Сообщений: 1,478
    • Репутация: 80
    • Webmoney BL: ?
    Цитата Сообщение от freeL Посмотреть сообщение
    Ясно, я ставил задержку между запросами в 30с, видимо этого мало.
    Еще вопрос - как обойти максимум гугла в 1к ссылок?
    Подставляйте inurl в запросы и разбавляйте ключи другими словами
    • 0
Страница 1 из 2 12 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Парсер выдачи яндекса
Софт, скрипты, сервисы 16 27.02.2015 19:21
Анализ выдачи яндекса
Софт, скрипты, сервисы 3 04.01.2010 03:56
Приколы выдачи Гугла
Оффтоп и свободные темы 1 21.10.2009 00:31
Покупка трафа в Yahoo и Google под фарму
PPC и контекстная реклама 23 25.09.2009 12:27
Удобный сервис для просмотра выдачи Google в других странах
Софт, скрипты, сервисы 5 14.09.2009 22:08

Интересные темы

парсинг google

Какие программы существуют для парсинга google, как называются и где скачать.

парсер google

Подробная статья про парсер google, как его написать и как им пользоваться, здесь.

парсер выдачи яндекса

Все про парсинг, парсер выдачи яндекса, где скачать или как сделать, читаем здесь.

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры