[utajazz]

раз в в два-три дня на автомате, скриптик все делает автоматом.

[jurar1]

еженедельно скриптик тож делает

[BABBLS]

Раз в месяц, использую исключительно базы для парсинга от BABBLS-а

аналогично, очень хорошая подборка запросов у баблса

Спасибо:) я Рад что Вам нравится

Интересен еще момент такой: с какой скоростью у вас парситься гугл сейчас через прокси? У меня Хрефером примерно 100-150К в сутки выходит.

У меня в сутки по хороших запросам хрефер может выпарсить более 1кк рессов уник по домену и по строке.

[auyuxax]

utajazz,jurar1, расскажите что за скриптик.

[noxon.su]

Когда спамил парсил неделями и очень основательно. До тех пор пока дубликатов не станет 99%. И даже после этого новые площадки находятся)

[SanchezBoy]

У меня в сутки по хороших запросам хрефер может выпарсить более 1кк рессов уник по домену и по строке.

Сколько потоков, какой канал инета и прокси (паблик или приват)?
Столько много никогда не получалось спарсить, поэтому так заинтересовался.

[BABBLS]

Сколько потоков, какой канал инета и прокси (паблик или приват)?
Столько много никогда не получалось спарсить, поэтому так заинтересовался.

300 потоков, прокси паблик, канал для парсинга не важен, имхо.. хватит 3мегабита.
а так 100мегабит.

Все зависит от запросов, если в запросах много результатов в выдаче гугла, то и с них будет больше напаршено, а если вы будете парсить по тем запросам по которым очень мало результатов то и результат будет не лучший.

[kizhand]

utajazz,jurar1, расскажите что за скриптик.

Тоже хотелось бы узнать что это за скрипт такой?

[SanchezBoy]

BABBLS, ну по запросам понятно. Ну ведь парсилка как заканчивает парсинг одного запроса, приступает сразу к другому. Поэтому скорость падать не должна логически, я ведь прав?