Иногда бывает нужны прокси рабочие, например под парсинг. В этом посте я расскажу о методе сбора проксей, которой сам пользовался, пока не купил хрефер.
1. Находим несколько рабочих и быстрых прокси где угодно. Уж 1 то можно найти не напрягаясь.
2. Вводим адрес прокси как есть в поисковую систему и смотрим, чего он нам выдал. Перед вами множество ссылок на публичные списки прокси. Открываем их, смотрим, что это действительно лист и записываем куда ни будь адреса.
3. Повторяем процедуру проверки листа для каждой ссылки, пока не станет попадатся откровенный мусор. У вас должно накопится штук 20 живых прокси листов.
4. Далее настраиваем любой офлайновый браузер teleport pro на скачку по карте и выкачиваем всё содержимое этих листов в отдельную папочку.
Далее прогой text pipe pro или любой другой, работающей с регулярными выражениями ищем всё по регулярному выражению
Код:Вуаля! Мы собрали все доступные прокси, осталось их почекать на живучесть любой прогой для проверки proxy и пользоваться:)/^[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]:([0-9*?])$/
UPD: Пока писал пост, наткнулся на список прокси листов, тем кому лень искать листы прокси рекомендую этот: 800 прокси листов
- 08.09.2009 20:01
- 08.09.2009 21:16
сбор прокси если у вас есть хрефер:
inurl:/proxyc/engine.php
переходим по ссылкам и меняем в адресной строке engine.php на list.txt
копипастим список прокси-листов в свой list.txt, а затем чекаем прокси хрефером - 08.09.2009 23:44
- Регистрация: 04.09.2009
- Сообщений: 288
- Репутация: 11
Спасибо за холявные прокси, а люди ранее в постах просили как их получить, а тут сразу и ответ.
- 09.09.2009 01:35
ну хрефер есть и не у всех)
А так - очень отлично, спасибо за инструкцию. Еще-бы среди этих были анонимных побольше)) - 09.09.2009 03:24
На анонимность чекает чекер анонимности. Вот такая скороговорка :)
- 09.09.2009 11:46
ну из 800 хорошо бы треть оказалась рабочей) спасибо конечно за список
- 09.09.2009 12:27
Отдельное спасибо за регулярку. Никак не осилю их написание.
Может кто посоветует литературу по Регулярным выражениям? - 09.09.2009 12:36
- Регистрация: 02.09.2009
- Сообщений: 1,065
- Репутация: 19
Покупные рулят. Но впринципе свои собраные тоже можно юзать, если немного постараться при их сборе.
- 09.09.2009 12:39
Тоже пользовался таким методом, как то давно, и давал хорошие результаты:)
по поводу этого способа. уже многие поменяли имя текстового файла, и пхп чекера, если кто не поменял, то увидев этот пост поменяют.сбор прокси если у вас есть хрефер:
inurl:/proxyc/engine.php
переходим по ссылкам и меняем в адресной строке engine.php на list.txt
копипастим список прокси-листов в свой list.txt, а затем чекаем прокси хрефером - 09.09.2009 13:39
- Регистрация: 04.09.2009
- Сообщений: 288
- Репутация: 11
выглядит все сложно, а на деле не так уж.
Тэги топика:
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
Делаем парсеры контента своими руками | Контент | 14 | 17.12.2013 01:26 |
proxy сервис | Софт, скрипты, сервисы | 6 | 01.12.2012 14:41 |
php: Парсер своими руками. Теория | Дайджест блогосферы | 0 | 25.12.2009 17:36 |
Тренинг-семинар "Продающий текст своими руками" | Семинары и конференции | 0 | 31.10.2009 00:50 |
Интересные темы
парсер контента собственными руками
Что тебе может понадобится для того, чтобы сделать парсер контента собственными руками, читай здесь.
сбор прокси
Как быстро и эффективно организовать сбор прокси, как проверить на работоспособность, читайте далее.
делаем парсер
Что такое парсинг и для чего он нужен вебмастеру, делаем парсер своими собственными силами.