Тулза по сбору всех страниц сайта

(Ответов: 21, Просмотров: 3256)
Страница 1 из 3 123 Последняя
  1. Опытный Аватар для hichnii
    • Регистрация: 03.09.2009
    • Сообщений: 306
    • Репутация: 12
    Возникла необходимость в сборе всех страниц нового сайта, то есть сбор проиндексированных страниц с использованием поисковых систем отпадает, как я представляю этот продукт:
    - десктопное приложение под Windows либо онлайн сервис
    - вводим урлик домена и краулер начинает скакать по навигации на сайте, тем самым собирая все страницы сайта
    - экспорт всех страниц сайта (без дублей) в текстовый файл в виде http://domain.com/page.html
    - интересны бесплатные варианты, но рассмотрю и платные

    Есть что подобное на SEO-рынке? Накидайте ТОЛЬКО ссылочек плиз - я сам все гляну и оценю, БЕЗ ФЛУДА
    • 0
  2. Дипломник
    • Регистрация: 03.09.2009
    • Сообщений: 220
    • Репутация: 10
    • 0
  3. Banned
    • Регистрация: 03.09.2009
    • Сообщений: 1,267
    • Репутация: 11
    А карта сайта чем вам не угодна?
    Вам нужен список всех страниц сайта и тулза для парсинга их в txt?
    • 0
  4. Опытный Аватар для hichnii
    • Регистрация: 03.09.2009
    • Сообщений: 306
    • Репутация: 12
    Цитата Сообщение от NRubleva Посмотреть сообщение
    А карта сайта чем вам не угодна?
    Вам нужен список всех страниц сайта и тулза для парсинга их в txt?
    изначально нет карты у сайта
    • 0
  5. Гуру Аватар для dimok
    • Регистрация: 10.08.2009
    • Сообщений: 1,605
    • Репутация: 143
    • Webmoney BL: ?
    много лет пользуюсь телепортом: http://www.tenmax.com/teleport/pro/home.htm - умеет все, что тебе надо
    Ротабан - баннерная реклама
    Ротапост - платные посты и постовые
    • 0
  6. Banned
    • Регистрация: 03.09.2009
    • Сообщений: 1,267
    • Репутация: 11
    Сгенерируйте карту сайта в формате TXT, это и будет решение вашего вопроса.
    Sitemap Generator - для этих целей подойдет.
    • 0
  7. Senior Member Аватар для Bodryj
    • Регистрация: 06.09.2009
    • Сообщений: 93
    • Репутация: 10
    Teleport Pro я использовал когда еще на модеме и повременном тарифе сайты скачивал для изучения.
    • 0
  8. Дипломник
    • Регистрация: 01.06.2009
    • Сообщений: 204
    • Репутация: 12
    тоже хотел отметить такую программу как Teleport Pro, скачает все страницы в html которые найдет на сайте
    • 0
  9. Banned
    • Регистрация: 07.09.2009
    • Сообщений: 12
    • Репутация: 10
    +1 за Телепорт, пользуюсь им со времен диалапа
    • 0
  10. Гуру Аватар для Dr.Gonzo
    • Регистрация: 03.09.2009
    • Сообщений: 1,503
    • Репутация: 64
    Вопрос в кол-ве страниц сайта. Если их реально много, то телепорт про, оффлайн эксплорер и тд - не выкачают полностью, почему - хз.

    PS а есть что-то подобное для линукса? Кроме wget, конечно.

    Кстати - wget - отличная штука, если есть сервак. Единственный и самый главный минус - однопоточная, но зато работает как часы.
    • 0
Страница 1 из 3 123 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Подскажите пожалуйста прогу для массовой проверки PR внутренних страниц сайта.
Софт, скрипты, сервисы 4 09.11.2010 21:00
Сервис по сбору и уникализации контента BlogBot
Софт, скрипты, сервисы 2 26.04.2010 18:17
подсчет страниц сайта
Вопросы от новичков 3 16.03.2010 21:33
Стоит ли покупать несколько ссылок с разных страниц одного сайта?
Вопросы от новичков 20 06.09.2009 20:08

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры