[vetlik]

Маловато страниц со статусом успешно

---------- Сообщение добавлено 19:04 ---------- Предыдущее 18:57 ----------

Навскидку без подсчета в эксель порядка 15% от всей базы рабочих ссылок.
--
Но все равно спасибо за халяву ))

[mln141]

Попробуем. Но хорошо бы если бы вывод шел в процессе работы, а не по окончанию. А то не знаешь висит/не висит и сколько сделано/осталось.

[olegf13]

У меня вылезает ошибка 504 - Gateway Time-out. Можете усовершенствовать скрипт, чтобы он хотя бы с какой-нибудь периодичностью отдавал ответы с сервера?

[likos]

Маул спалил эту тему давно, правда она уже тогда была неактуальной, а сейчас темболее

[mln141]

Да тоже 504. Похоже такой объем скрипту не потянуть. Нужна десктопная программа.

[vetlik]

Всё верно. На хостинге её имеет запускать, если у вас есть возможность ручной настройки php.ini.
--
Я запустил на локальном компьютере через денвер. Параметр PHP max_executive_time: выставлять имеет смысл не 30 (секунд), а скажем этак 14000 секунд. Скрипт работает. Разумеется не быстро, но 20-30 ссылок за минуту обрабатывается. Можете прикинуть сколько всего минут надо будет на обработку всей базы сайтов.

[lenin1122]

Сегодня рылся на харде и нашел у себя десткопную прогу и базу на почти 10к которую парсил когда-то целую ночь :)

Кому надо - могу выложить халявку, но через недельку :) даже числа эдак 9ого 10ого. сейчас не могу по личным причинам, увы.

[Eardor]

Лишние бэки для гугла не помешают

Че, серьезно?
Пошел спамить адалт сайты...

[mln141]

Кому надо - могу выложить халявку, но через недельку

Вот спасибо. Буду ждать. А то подумал самому написать - но лень.

[mln141]

Кстати ряд ссылок в списке неправильные - там всесто vashsite.com (автоматом меняется на реальный URL) стоят ссылки на другие сайты (вероятно автора темы).