Вопрос по парсингу

(Ответов: 9, Просмотров: 322)
  1. Новичок Аватар для Eskmo
    • Регистрация: 05.11.2015
    • Сообщений: 28
    • Репутация: 0
    Есть сайт с которого мы парсим определенную информацию.
    Парсим при помощи парсера на базе эксель. Все ок все работает, но каждые минут 10 у нас вылезает капча на сайте и в этот момент парсер перестает парсить, и вместо нужной инфы парсит просто пустое значение. Заходим на этот сайт, вводим капчу и заного парсим. Это не очень удобно. Скажи есть ли какая то возможность менять раз в 3-5 минут айпишник свой автоматически. Или может есть другое решение этой проблемы?
    • 0
  2. Гуру Аватар для web-search
    • Регистрация: 31.08.2012
    • Сообщений: 735
    • Репутация: 101
    • Webmoney BL: ?
    Eskmo, Конечно есть, прокси для этого существуют. Конечно их применение зависит от "способностей"
    самого парсера, обычно такой функционал прикручен по умолчанию.
    Акция ограничена! Получи токены биржи >на халяву<
    • 0
  3. Гуру
    • Регистрация: 22.04.2014
    • Сообщений: 983
    • Репутация: 131
    Есть люди, которые занимаются профессиональным парсингом на этом сайте, но не за спасибо, конечно же.
    Конвертируй любой датинг и адалт трафф выгодно вместе с Imonetizeit
    • 0
  4. Новичок Аватар для Eskmo
    • Регистрация: 05.11.2015
    • Сообщений: 28
    • Репутация: 0
    Lastwarrior, Никто и не говорил что я за спасибо предлагаю решить проблему. О цене можно договорится в ЛС. Если знаете таких людей дайте контакты пожалуйста.
    • 0
  5. Sunshine reggae Аватар для OKyJIucT
    • Регистрация: 02.09.2011
    • Сообщений: 3,240
    • Репутация: 1830
    • Webmoney BL: ?
    Eskmo, добавляйте реферера, меняйте юзер агента, делайте рандомными промежутки между парсингом, сохраняйте куки, которые отдает сайт, и перед каждой итерацией в парсинге очищайте их. Ну или купите прокси и юзайте их.
    • 0
  6. Новичок Аватар для Eskmo
    • Регистрация: 05.11.2015
    • Сообщений: 28
    • Репутация: 0
    OKyJIucT, Я не понимаю многих ваших слов) Я не разработчик. Парсер о котором писал выше заказывал, решение по борьбе с капчей они мне предложить не смогли. Расскажите по подробнее про прокси. Если ли специальные программы для автоматической подмены?
    • 0
  7. Студент
    • Регистрация: 12.04.2015
    • Сообщений: 37
    • Репутация: 6
    Зеннопостер
    • 0
  8. Sunshine reggae Аватар для OKyJIucT
    • Регистрация: 02.09.2011
    • Сообщений: 3,240
    • Репутация: 1830
    • Webmoney BL: ?
    Eskmo, поясните, что значит "при помощи парсера на базе Эксель"? Вы прямо из Эксель документа парсите, или десктопный софт, или серверный скрипт? Как выглядит парсер, каким образом его можно запускать, куда он инфу складывает?
    • 0
  9. Новичок Аватар для Eskmo
    • Регистрация: 05.11.2015
    • Сообщений: 28
    • Репутация: 0
    OKyJIucT, Отпишу в ЛС
    • 0
  10. Дипломник Аватар для lipshets
    • Регистрация: 31.03.2010
    • Сообщений: 199
    • Репутация: 58
    Посмотрите в сторону бесплатного BrowserAutomationStudio. Создавайте автономные многопоточные приложения бесплатно и без навыков программирования.
    Это бесплатный аналог зеннопостера. Доволи таки неплохой. С парсингом справляется. Прокси поддерживает. Антикапчу тоже.
    Компилируется в ехе файл.
    Последний раз редактировалось lipshets; 07.09.2016 в 16:51. Причина: Дополнил.
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Вакансия, СНГ, удалённо, Специалист по парсингу, от 20 000 руб.
Предложения работы 0 08.07.2016 15:42
Экономим благодаря автоматизированному парсингу сайтов с помощью Kimono и таблиц Google
Дайджест блогосферы 0 25.03.2015 14:34
Вопрос по парсингу базы площадок в SAPE
Вопросы от новичков 0 07.04.2014 15:44
Вопрос по парсингу информации с определённых div
Оффтоп и свободные темы 0 15.01.2014 20:59
Предлагаю услуги по парсингу контента/сайтов/картинок/сбора телефонных номеров и др.
Другая работа 11 09.05.2013 08:46

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры