Очень интересный и полезный метод парсинга

(Ответов: 29, Просмотров: 4408)
Страница 1 из 3 123 Последняя
  1. Senior Member Аватар для mr. werewolf
    • Регистрация: 02.09.2009
    • Сообщений: 401
    • Репутация: 11
    Всем привет! =)
    Уже больше года использую очень удобный метод парсинга ссылок на страницах. Очень часто надо собрать все линки с какой либо страницы, например список ссылок на бесплатные прокси-листы, список ссылок на картинки да и просто ссылки на внутренние страницы сайта. В ручную их копипастить в некоторых случаях очень надоедливое, долгое и просто скушное занятие =)
    Делаеться все очень просто
    1)Делаем закладку в том же ФаерФоксе
    2)В и в ее свойствах в адрес пишем -
    PHP код:
    javascript:all=document.links.length;mass='<b>Всего ссылок на странице:\u0020'+all+'</b><br><br>\n';for(i=0;i<all;i++){mass+=document.links[i]+'<br>\n';}newwind=window.open('about:blank','result','width=600,top=100,left=100,scrollbars=1');newwind.document.write(mass); 
    3)Сохраняем с название “Парсер”
    4)Выводим эту закладку на Панель Закладок
    Все, наш парсер готов, теперь при нажатии на эту закладку-кнопку будет появляться окошко с списком всех ссылок на текущей странице =)
    Теперь разкажу как использовать этот парсер для парсинга выдачи google.com
    В обычной выдаче гугла ссылки имеют формат редиректа через сервер гугла и при сборе ссылок мы получим не адрес http://site.com а чтото на подобии http://www.google.com/url?sa=t&source=web&ct=res&cd=3&url=http%3A%2F%2Fw ww.site.com……….
    Нам такие ссылки не нужны, потому мы делаем умно, а именно смотрим упрощённую выдачу http://www.google.com/ie?q=&num=100&...&sa=N&filter=0
    Этот линк также добавляем себе в закладки чтоб не вводить постоянно вручную.
    Вот и всё, теперь мы можем вводить любой запрос и собирать по 100 линков выдачи гугла переходя по страницам выдачи и так вплоть до 1000.
    Вариантов использования этого метода уйма. Я его использую чуть ли не каждый день и даже не представляю что бы я делал, если бы не знал эго =)
    Спасибо за внимание=)
    Последний раз редактировалось mr. werewolf; 04.09.2009 в 00:42.
    • 0
  2. Дипломник
    • Регистрация: 03.09.2009
    • Сообщений: 220
    • Репутация: 10
    спасибо за классный букмарклет :)
    • 0
  3. Senior Member Аватар для paxter
    • Регистрация: 03.09.2009
    • Сообщений: 482
    • Репутация: 10
    вот плагин Firefox для этих целей: Outwit(http://www.outwit.com/)
    • 0
  4. Дипломник
    • Регистрация: 03.09.2009
    • Сообщений: 220
    • Репутация: 10
    Цитата Сообщение от paxter Посмотреть сообщение
    вот плагин Firefox для этих целей: Outwit(http://www.outwit.com/)
    о, еще лучше!

    Полезно: firefox addons.
    Последний раз редактировалось grazer; 10.05.2010 в 20:48.
    • 0
  5. Senior Member Аватар для mr. werewolf
    • Регистрация: 02.09.2009
    • Сообщений: 401
    • Репутация: 11
    Цитата Сообщение от paxter Посмотреть сообщение
    вот плагин Firefox для этих целей: Outwit(http://www.outwit.com/)
    уверен что для этих целей и настолько же удобно? +)
    • 0
  6. Гуру Аватар для !alexandr!
    • Регистрация: 24.07.2009
    • Сообщений: 611
    • Репутация: 15
    mr. werewolf конечно лучше выложил...
    • 0
  7. Опытный Аватар для LIME
    • Регистрация: 02.09.2009
    • Сообщений: 420
    • Репутация: 16
    Хорошая тема. Видел недавно на умаксе, но не заострил внимания. А оказывается, что зря.
    • 0
  8. Senior Member Аватар для mr. werewolf
    • Регистрация: 02.09.2009
    • Сообщений: 401
    • Репутация: 11
    Цитата Сообщение от LIME Посмотреть сообщение
    Хорошая тема. Видел недавно на умаксе, но не заострил внимания. А оказывается, что зря.
    угу, я на умаксе тоже этот метод описывал
    • 0
  9. Студент Аватар для jonn22
    • Регистрация: 03.09.2009
    • Сообщений: 51
    • Репутация: 16
    Удобная вещь, респект
    • 0
  10. Senior Member Аватар для mr. werewolf
    • Регистрация: 02.09.2009
    • Сообщений: 401
    • Репутация: 11
    Цитата Сообщение от jonn22 Посмотреть сообщение
    Удобная вещь, респект
    Всегда рад поделиться интересными темками =) Что и буду делать на этом форуме и у себя в блоге =)
    • 0
Страница 1 из 3 123 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Сайт очень плохо индексируется.
Вопросы от новичков 16 16.04.2010 15:18
Намекните метод увеличения страниц в основном индексе?
Google 16 10.01.2010 21:47
Интересный вопрос. Как вы ищите рефералов ?
Вопросы от новичков 2 28.11.2009 21:41
Метод получения уникального контента.
Контент 58 10.11.2009 00:11

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры