DogPile - парсит ли кто нибудь?

(Ответов: 21, Просмотров: 4178)
Страница 1 из 3 123 Последняя
  1. Banned
    • Регистрация: 02.09.2009
    • Сообщений: 357
    • Репутация: 50
    Пару лет назад парсил для своих нужд сей поисковик. Но сейчас они что-то подкрутили и на странице кеев имеем это
    http://www.dogpile.com/info.dogpl/se...y/inc/data.xml
    Старый парсер не справляется с задачей выпарсить кеи.

    Кто нибудь юзает сей сервис в своих целях? Чем парсите? Есть что-либо платное и сложно ли сие пишется под заказ если что? Т.е. на сколько сложно вытянуть эти кеи оттуда?
    • 0
  2. Гуру Аватар для dimok
    • Регистрация: 10.08.2009
    • Сообщений: 1,605
    • Репутация: 143
    • Webmoney BL: ?
    я парсю. софт свой. платное есть: http://actualkeywords.com/ (база в том числе и с догпайла)

    а вытянуть непросто - там хорошенько защитили. :)
    Ротабан - баннерная реклама
    Ротапост - платные посты и постовые
    • 0
  3. Дипломник
    • Регистрация: 01.06.2009
    • Сообщений: 204
    • Репутация: 12
    Цитата Сообщение от dimok Посмотреть сообщение
    а вытянуть непросто - там хорошенько защитили. :)
    Я уже вытягиваю
    Кода на несколько строк.
    Осталось немножко доработать и тестить.
    • 0
  4. Гуру Аватар для dimok
    • Регистрация: 10.08.2009
    • Сообщений: 1,605
    • Репутация: 143
    • Webmoney BL: ?
    Цитата Сообщение от biz0wn Посмотреть сообщение
    Кода на несколько строк.
    гонишь! не верю, что парой строк можно сделать. на чем пишешь?
    Ротабан - баннерная реклама
    Ротапост - платные посты и постовые
    • 0
  5. Senior Member Аватар для RichardBeeter
    • Регистрация: 04.09.2009
    • Сообщений: 574
    • Репутация: 23
    Как то пробовал, но решил ограничится основными, типа яндекса и гугла...
    • 0
  6. Banned
    • Регистрация: 02.09.2009
    • Сообщений: 357
    • Репутация: 50
    2 dimok ) - ну про твой сервис давно всем известно ) я имел ввиду платное в плане софта для парсинга. Я очень понимать, что твой сервис зе бест, но свое все же лучше )


    Цитата Сообщение от RichardBeeter Посмотреть сообщение
    Как то пробовал, но решил ограничится основными, типа яндекса и гугла...
    А про гугл можно подробней )?
    • 0
  7. Дипломник
    • Регистрация: 01.06.2009
    • Сообщений: 204
    • Репутация: 12
    Цитата Сообщение от dimok Посмотреть сообщение
    гонишь! не верю, что парой строк можно сделать. на чем пишешь?
    imacros на js, если красиво доделаю - похвастаюсь
    • 0
  8. Junior Member
    • Регистрация: 02.09.2009
    • Сообщений: 9
    • Репутация: 10
    достаточно набрать в яндексе заветную фразу и увидите рабочий скрипт в 14 строчек :)
    • 0
  9. Senior Member Аватар для deema
    • Регистрация: 03.09.2009
    • Сообщений: 183
    • Репутация: 10
    Раньше при загрузке dogpile.com/info.dogpl/searchspy/inc/data.xml можно было вытягивать кейворды по которым осуществлялись запросы. Теперь там яваскриптом показывают слова. Как из яваскрипта их тянуть - хз.



    $ch = curl_init();
    curl_setopt($ch, CURLOPT_URL, ’http://www.dogpile.com/dogpile/ws/se...SearchSpy’);
    curl_setopt($ch, CURLOPT_HTTPHEADER, array(’Content-Type:
    application/json’));
    curl_setopt($ch, CURLOPT_TIMEOUT, 15);
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
    curl_setopt($ch, CURLOPT_POST, 1);
    curl_setopt($ch, CURLOPT_POSTFIELDS, ’{"numTerms":50,"filter":true}’);
    // numTerms - кол-во кеев за раз

    $response = curl_exec($ch);
    curl_close($ch);

    $feed = new SimpleXMLElement($response);
    foreach ($feed->channel->item as $item) {
    echo (string)$item->title . ’<br />’;
    }
    • 0
  10. Banned
    • Регистрация: 02.09.2009
    • Сообщений: 357
    • Репутация: 50
    Поиск выдает только сие чудо
    $ch = curl_init();

    curl_setopt($ch, CURLOPT_URL, 'http://www.dogpile.com/dogpile/ws/service/DPServices.asmx/GetSearchSpy');

    curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Type: application/json'));

    curl_setopt($ch, CURLOPT_TIMEOUT, 15);

    curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);

    curl_setopt($ch, CURLOPT_POST, 1);

    curl_setopt($ch, CURLOPT_POSTFIELDS, '{"numTerms":50,"filter":true}'); // numTerms - кол-во кеев за раз



    $response = curl_exec($ch);

    curl_close($ch);



    $feed = new SimpleXMLElement($response);

    foreach ($feed->channel->item as $item) {

    echo (string)$item->title . '<br />';

    }
    Но по урлу http://www.dogpile.com/dogpile/ws/se...x/GetSearchSpy ничего нет ). Тыкни носом где ты нашел эти 14 строчек )
    • 0
Страница 1 из 3 123 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Кто-нибудь из Таиланда есть тут?
Оффтоп и свободные темы 76 08.03.2010 16:07
Кто-нибудь пытался зарегистрировать .edu?
Хостинг и Серверы 53 04.10.2009 22:32
blogbot кто-нибудь использует?
Софт, скрипты, сервисы 47 27.09.2009 15:39

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры