[Sma11erM1nd]

Нужен софт, скрипт, что-нибудь еще, не важно, для массовой проверки доменов на тиц и индекс (как минимум). Под словом массовой я подразумеваю порядка 100к доменов. Из того что удалось найти, не то что не проверяют такие объемы, а многие даже отказались загрузить такой список. У кого есть какие идеи на этот счет?

[DarkAngel-163]

Пользовался только программой Определяйка, но не знаю выдержит ли она такой большой список. Пробовали её?

[Sma11erM1nd]

DarkAngel-163, Сейчас как раз наткнулся на нее в "похожих темах". Скачиваю. Попробую. В теме написано что 20к на тесте выдержала, так что уже не плохо, если что за 5 раз можно будет проверить.

[semyon]

Определяйка конечно хорошо работает при малых проверках (до 500), но многопоточность в 30 потоков... Это затянется на ооочень долго.
Я советую смотреть в сторону олсаба + прокси + антигейт, но он платен. За ночь 800к проверил. Правда 5 долларов в антигейте спустил...

[forpgs]

mchecker, правда там только тиц, индекса нет, но мало ли пригодится. PR, DMOZ, яндекс.каталог там еще есть

[Sma11erM1nd]

Могу сказать в пользу mchecker'а, что список 96к доменов он скушал буквально за пару секунд, хотя определяйке на это потребовалось заметно больше времени.

Для себя я решил проблему несколько иначе в итоге: проверил только на ТИц, ПР, ЯК. Индекс проверять не стал. После этого оставил только домены с наличием либо ТИц, либо ПР, либо ЯК. Пускай выборка получилась далека от идеальной, зато потрачены было в разы меньше времени, а на таких объемах потерять из выборки несколько сотен доменов или наоборот получить несколько сотен лишних - особо роли не играет.

p.s. И да, я не базу ссылок готовлю если что