Как спарсить список урлов страниц по запросу?

(Ответов: 9, Просмотров: 1922)
  1. Опытный Аватар для Сарапульский
    • Регистрация: 13.04.2011
    • Сообщений: 312
    • Репутация: 79
    Как спарсить список урлов страниц по запросу? Есть определенный запрос, по котором находятся N страниц. Нужно спарсить урлы по этому запросу. Как реализовать?
    • 0
  2. Дипломник Аватар для maXdonalds
    • Регистрация: 15.07.2011
    • Сообщений: 204
    • Репутация: 24
    Яндекс или гугл?
    • 1

    Спасибо сказали:

  3. Опытный Аватар для Сарапульский
    • Регистрация: 13.04.2011
    • Сообщений: 312
    • Репутация: 79
    Гугл
    • 0
  4. Дипломник
    • Регистрация: 10.05.2011
    • Сообщений: 216
    • Репутация: 43
    N - это сколько? какой порядок чисел хоть?
    • 0
  5. Опытный Аватар для Сарапульский
    • Регистрация: 13.04.2011
    • Сообщений: 312
    • Репутация: 79
    Какая разница? Цифра может доходить до 200000 страниц. Может меньше. Это действительно имеет значение или просто посты набиваем?
    • 0
  6. Дипломник Аватар для maXdonalds
    • Регистрация: 15.07.2011
    • Сообщений: 204
    • Репутация: 24
    Вот программа
    Вводишь запрос, добавляешь зоны, создаешь 2 файла *.txt и нажимаешь старт.
    Все предельно ясно. Удачи.
    • 1

    Спасибо сказали:

  7. Опытный Аватар для Сарапульский
    • Регистрация: 13.04.2011
    • Сообщений: 312
    • Репутация: 79
    Блин, круто. Спасибо. Вы сам её написали?
    • 0
  8. Дипломник Аватар для maXdonalds
    • Регистрация: 15.07.2011
    • Сообщений: 204
    • Репутация: 24
    Сарапульский, нет, на этом форуме как-то наткнулся на нее, скачал, понравилась.
    • 0
  9. Гуру Аватар для Darimar
    • Регистрация: 08.06.2011
    • Сообщений: 535
    • Репутация: 24
    Цитата Сообщение от Сарапульский Посмотреть сообщение
    Цифра может доходить до 200000 страниц
    Яндекс и Гугл показывают только 1000 самых релевантных результатов, соответственно и спарсить больше не получится.
    • 0
  10. Дипломник Аватар для maXdonalds
    • Регистрация: 15.07.2011
    • Сообщений: 204
    • Репутация: 24
    да, согласен, чтобы собрать больше результатов можно попробовать так:

    Развернуть текст


    ваш запрос site:ru
    ваш запрос site:su
    ваш запрос site:com
    ваш запрос site:net
    ваш запрос siterg
    ваш запрос site:info
    ваш запрос site:biz
    ваш запрос site:name
    ваш запрос site:ua
    ваш запрос site:by
    ваш запрос site:kz
    ваш запрос site:us
    [свернуть]
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Исключение урлов рекламодателей в AdSense
PPC и контекстная реклама 3 01.08.2011 14:32
Базы авто апрув блогов. Как и чем спарсить.
Реклама партнерских программ 0 10.05.2011 21:02
Прочекать список кеев на кол-во страниц в гугле, чем?
Софт, скрипты, сервисы 4 17.11.2009 07:42
Укоротители урлов
Оффтоп и свободные темы 12 03.09.2009 13:51

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры