[Mohatma]

dserosh,

а Вы с России?

Да, из России

[treeclimber]

dserosh,

Скорей всего причина моего нахождения за пределами России - видимо защита ЯНдекса

Был в Тае. Пробовал парсить КейКоллектором. Все время вылазила капча. Парсинг был очень медленный.
Интересно как парсят выдачу коллеги, которые долговременно проживают в Таиланде ?

У меня 5000 кеев почти 2 дня стоял. Может есть как-то вариант ускорить?

Варианты ускорения работы есть. они вообщем-то стандартны
1. Разбить 5000 кеев по группам.И обрабатывать "по шагам", т.е. спарсил группу , начинаешь составлять СЯ и ТЗ для писателей, а паралельно другую группу парсишь.
2. Использовать прокси для избежания бана. Но данный способ, на мой взгляд, не очень удобный.
3. использовать сервис антигейта.
4. Включить он-лайн базу ключевых слов от самого КейКоллектора.
5. Поиграться с параметром таймаута ожидания сервиса.
6. Поэкспериментировать с параметром частотности фраз. ну типа отключить сбор ф раз с базовой частотностью менее 10-ти.
7. Получать данные о частотности ключей из Яндекс-Директ.
Видимо еще есть варианты.

[dserosh]

Да, из России

Тогда не понятно, почему вас та же проблема коснулась... я думал в России у всех капча вылетает редко....

---------- Сообщение добавлено 11:11 ---------- Предыдущее 11:07 ----------

Разбить 5000 кеев по группам.И обрабатывать "по шагам", т.е. спарсил группу , начинаешь составлять СЯ и ТЗ для писателей, а паралельно другую группу парсишь

Кеи используются для дорвеев, поэтому требуется ожидание полной абсолютно выборки, для последующей очистки от случайно залетевших

использовать сервис антигейта

без него родимого, вообще бы колом все встало, только он и спасает

Включить он-лайн базу ключевых слов от самого КейКоллектора

вот это еще не пробовал, спасибо за наводку, куплю - проверю


все остальные пункты актуальны только при написании качественных статей, но не при создании дорвеев

[treeclimber]

dserosh,

вот это еще не пробовал, спасибо за наводку, куплю - проверю

Не знаю актуально ли это для дорвеев...
Вообщем база от КейКоллектора может быть немного устаревшей.

[daivers]

ребята может кто нибудь знает способ по борьбе с капчей если живешь не в России? Уже пробовал менять ip на московский, все равно выскакивает.

[DOleg]

способ по борьбе с капчей

1 поток, хотя это вряд ли поможет.
Антигейт или Антикапча. На 1 доллар будете полгода пользоваться.

[daivers]

DOleg, пока так и поставил. Но из-за этого намного дольше обрабатывает.