- 07.09.2009 20:03Banned

- Регистрация: 07.09.2009
- Сообщений: 7
- Репутация: 10
- 07.09.2009 20:24
- 08.09.2009 13:51Banned

- Регистрация: 08.09.2009
- Сообщений: 47
- Репутация: 10
+1 за Телепорт
- 08.09.2009 13:53Junior Member

- Регистрация: 08.09.2009
- Сообщений: 20
- Репутация: 10
Телепорт, определенно
- 08.09.2009 14:07Опытный

- Регистрация: 03.09.2009
- Сообщений: 278
- Репутация: 10
ТС для каких целей нужно собирать страницы ?
- 08.09.2009 14:09
+1 за Телепорт
пробывал много разных но эта больше приглянулась - 08.09.2009 14:22
какая разница для каких целей - это не имеет значения - цели разные, важен результат - текстовый файл со списком урлов вида: http://domen.com/page1.html
- 08.09.2009 14:25
Упс, не правильно понял вначале. Тогда тебе нужно искать проги для создания sitemap'а, с возможностью сбора всех урлов в один файл.
PS попробуй вот это например http://home.snafu.de/tilman/xenulink.html#Description
Очень быстро работает, может сделать (в том числе) и сайтмап. - 08.09.2009 14:45Опытный

- Регистрация: 04.09.2009
- Сообщений: 288
- Репутация: 11
Телепорт неплохо справляется с этой целью.
- 08.09.2009 19:10
wget -r -l3 -s -o map.txt
-r - рекурсивно
-l3 до третьего уровня
-s ведёт себя как паук (просто ходит по страничкам)
-o куда писать лог.
Насчёт -o не уверен, можно попробовать -f
Скачает вам все страницы до третьего уровня. Под винду вгет тоже есть
Похожие темы
| Темы | Раздел | Ответов | Последний пост |
|---|---|---|---|
Подскажите пожалуйста прогу для массовой проверки PR внутренних страниц сайта. | Софт, скрипты, сервисы | 4 | 09.11.2010 21:00 |
Сервис по сбору и уникализации контента BlogBot | Софт, скрипты, сервисы | 2 | 26.04.2010 18:17 |
подсчет страниц сайта | Вопросы от новичков | 3 | 16.03.2010 21:33 |
Стоит ли покупать несколько ссылок с разных страниц одного сайта? | Вопросы от новичков | 20 | 06.09.2009 20:08 |





