Возникла необходимость в сборе всех страниц нового сайта, то есть сбор проиндексированных страниц с использованием поисковых систем отпадает, как я представляю этот продукт:
- десктопное приложение под Windows либо онлайн сервис
- вводим урлик домена и краулер начинает скакать по навигации на сайте, тем самым собирая все страницы сайта
- экспорт всех страниц сайта (без дублей) в текстовый файл в виде http://domain.com/page.html
- интересны бесплатные варианты, но рассмотрю и платные
Есть что подобное на SEO-рынке? Накидайте ТОЛЬКО ссылочек плиз - я сам все гляну и оценю, БЕЗ ФЛУДА
- 07.09.2009 16:43
- 07.09.2009 16:47
- Регистрация: 03.09.2009
- Сообщений: 220
- Репутация: 10
- 07.09.2009 16:52
- Регистрация: 03.09.2009
- Сообщений: 1,267
- Репутация: 11
А карта сайта чем вам не угодна?
Вам нужен список всех страниц сайта и тулза для парсинга их в txt? - 07.09.2009 17:03
- 07.09.2009 17:24
много лет пользуюсь телепортом: http://www.tenmax.com/teleport/pro/home.htm - умеет все, что тебе надо
- 07.09.2009 17:33
- Регистрация: 03.09.2009
- Сообщений: 1,267
- Репутация: 11
Сгенерируйте карту сайта в формате TXT, это и будет решение вашего вопроса.
Sitemap Generator - для этих целей подойдет. - 07.09.2009 17:37
Teleport Pro я использовал когда еще на модеме и повременном тарифе сайты скачивал для изучения.
- 07.09.2009 17:42
- Регистрация: 01.06.2009
- Сообщений: 204
- Репутация: 12
тоже хотел отметить такую программу как Teleport Pro, скачает все страницы в html которые найдет на сайте
- 07.09.2009 19:08
- Регистрация: 07.09.2009
- Сообщений: 12
- Репутация: 10
+1 за Телепорт, пользуюсь им со времен диалапа
- 07.09.2009 19:13
Вопрос в кол-ве страниц сайта. Если их реально много, то телепорт про, оффлайн эксплорер и тд - не выкачают полностью, почему - хз.
PS а есть что-то подобное для линукса? Кроме wget, конечно.
Кстати - wget - отличная штука, если есть сервак. Единственный и самый главный минус - однопоточная, но зато работает как часы.
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
Подскажите пожалуйста прогу для массовой проверки PR внутренних страниц сайта. | Софт, скрипты, сервисы | 4 | 09.11.2010 21:00 |
Сервис по сбору и уникализации контента BlogBot | Софт, скрипты, сервисы | 2 | 26.04.2010 18:17 |
подсчет страниц сайта | Вопросы от новичков | 3 | 16.03.2010 21:33 |
Стоит ли покупать несколько ссылок с разных страниц одного сайта? | Вопросы от новичков | 20 | 06.09.2009 20:08 |