[!=all]

Тор очень медлительный, да и задержка довольно чувствительная идет между сменами ипов, забанить успевает. Только многопоточность спасает кое-как.

[SanchezBoy]

Вот именно! Придётся парсить в один поток (раз минус), с большой задержкой (два минус).
Легче купить доступ к сервису и за 1$ в день получать список активных прокси/сокс.

[auyuxax]

Не знаю я секретов, чтобы парсить без прокси, да и имхо это нереально для больших обьемов.

[webvolume]

Парсинг google за день (24часа) при задержке 11 секунд, в один поток можно сделать 7-8 тысяч запросов. Работаю с программой Google Parse Free. Для новичка - самое то, с проксями не надо возиться.

[BABBLS]

Вообще по идее без прокси легко спамить, но затратно. легче прокси покупать, имхо.
Вариант парсинга без прокси.
Берем покупаем сервак с 200+ ип устанавливаем нужное количество копий парсилок, запускаем парсинг без таймаута + использование анти капчи.
только это затратно. сервак такой около 500баксов будет стоить.

[ilyha]

Прокси можно приобрести спокойна, там их ещё и с доставкой на почту присылают 8)

[SanchezBoy]

BABBLS, 500$ для парсинга одного, очень жирно. Прокси 30$ в месяц, сервер баксов за 150$ и хрефер = отличный и быстрый парсинг.
ilyha, в очередной раз не понимаю твоего сообщения. Как прокси можно на почту прислать?

[auyuxax]

Лучше сервер баксов за 100+прокси баксов 100.

[quantum]

Хрефер успешно сканить миллионы страниц и с бесплатными проксями, который тут же собирет

Аналогично. При массовом парсинге без прокси не обойтись. Но и покупать смысла особого нет. Разница будет незначительная, если постоянно обновлять список бесплатных проксей.

[BABBLS]

ну я о том же что очень дорого приобретать сервак с несколькими десятками Ip и с него парсить, но при таком парсинге в принципе можно в разы больше и быстрей выпарсить, чем с прокси.
Т.к. когда с прокси парсишь, не все запросы проходят.