Как спарсить рейтинг LiveInternet?

(Ответов: 6, Просмотров: 817)
  1. Новичок
    • Регистрация: 02.01.2018
    • Сообщений: 3
    • Репутация: 0
    Доброго времени суток! Назрел вопрос - как спарсить список доменом из рейтинга LiveInternet? Пробовал парсить с помощью ContentDownloader, но ничего из этого не выходит. Другие сайты без проблем парсит. Я так понимаю, что все дело из-за скрипта, который и выводит рейтинг в LI. Так собственно вопрос - как теперь быть, как обойти этот скрипт и все же получить список доменов? Заранее спасибо!
    • 0
  2. Quae res omnia Аватар для Coder
    • Регистрация: 29.01.2015
    • Сообщений: 821
    • Репутация: 299
    _http://simplehtmldom.sourceforge.net/manual.htm
    • 2

    Спасибо сказали:

    arhimed(10.01.2018), struvva(07.01.2018),
  3. Новичок
    • Регистрация: 30.03.2016
    • Сообщений: 9
    • Репутация: 0
    MasterLee, Liveinternet наверняка старается бороться с такими как вы. Я пробовал парсить с использованием python scrapy и тоже долго не мог понять в чем дело. Но все очевидно, вся инфа генерится js скриптом. Поэтому нужен реальный браузер, а не парсер запросов. Для этого хорошо подходит например selenium.
    • 0
  4. Студент
    • Регистрация: 12.04.2015
    • Сообщений: 37
    • Репутация: 6
    зеннопостер на раз два сделает
    • 1

    Спасибо сказали:

    Anna GAevska(13.02.2018),
  5. Новичок Аватар для Anna GAevska
    • Регистрация: 13.02.2017
    • Сообщений: 26
    • Репутация: 3
    • Webmoney BL: ?
    Поддержу, зенка работает гуд.
    • 0
  6. Гуру
    • Регистрация: 09.10.2011
    • Сообщений: 1,816
    • Репутация: 251
    Цитата Сообщение от MasterLee Посмотреть сообщение
    с помощью ContentDownloader
    можно, если у Вас UTLIMATE версия. В ней используется WBApp который эмулирует работу браузера. Можно парсить и выдачу гугл яндекс. Почитайте различия версий там все написано.
    • 0
  7. Sapienti sat Аватар для brainix
    • Регистрация: 01.01.2013
    • Сообщений: 1,932
    • Записей в дневнике: 1
    • Репутация: 817
    • Webmoney BL: ?
    Код:
    https://www.liveinternet.ru/rating/ru//today.tsv?page=1
    Сложно js посмотреть, да?
    • 1

    Спасибо сказали:

    suvoroff(14.02.2018),

Похожие темы

Темы Раздел Ответов Последний пост
Как спарсить iframe
Web программирование 1 03.03.2016 16:51
Спарсить пользователей ВК
Вопросы от новичков 6 12.01.2016 14:15
Показатели Liveinternet
Вопросы от новичков 1 02.08.2015 19:36
liveinternet заблокирован
Оффтоп и свободные темы 23 09.11.2012 13:06
Что с liveinternet?
Вопросы от новичков 2 27.01.2012 16:54

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры