Тонкости настройки robots.txt для разных CMS [Конкурсная статья]

(Ответов: 71, Просмотров: 25791)
Страница 6 из 8 Первая ... 45678 Последняя
  1. Дипломник Аватар для patrician
    • Регистрация: 22.01.2011
    • Сообщений: 245
    • Репутация: 59
    А почему бы это:
    Disallow: /*do=lastcomments
    Disallow: /*do=feedback
    Disallow: /*do=register
    Disallow: /*do=lostpassword
    Disallow: /*do=addnews
    Disallow: /*do=stats
    Disallow: /*do=pm


    Не заменить на это?
    Disallow: /?do=*
    • 0
  2. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    patrician, в основном, делал так как и Вы, но спустя некоторое время я заказывал разработку дополнительных модулей для сайта, а так же исходя из тех что находятся в свободном доступе, которые делают ссылки на страницы такого типа, я решил указать конкретные страницы.
    • 0
  3. Студент Аватар для vasilevzz
    • Регистрация: 17.09.2012
    • Сообщений: 34
    • Репутация: 3
    • Webmoney BL: ?
    Да ладно, вот это расписали, Спасибо вам всем огромное за развернутое обсуждение. Ато уже фиг знает сколько ищу нормальный роботс и что бы было объяснено почему то то закрыто, а то то открыто. Инфы море а конкретного ничего не мой найти, у каждого по разному, разные доводы.
    • 0
  4. Студент
    • Регистрация: 28.09.2012
    • Сообщений: 79
    • Репутация: 4
    Был бы безмерно счастлив, если бы кто нибудь написал сюда правильный роботс для Джумлы. Ведь cms достаточно ходовая.
    • 0
  5. Опытный Аватар для genesis33
    • Регистрация: 10.09.2012
    • Сообщений: 453
    • Репутация: 72
    • Webmoney BL: ?
    Для джумлы было бы интересно посмотреть...
    • 0
  6. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    Прошу прощение, с джумлой работал всего 2-3 раза но глубоко не копал, если кто то поделиться своим robots и подробно распишет что и зачем закрывал - с удовльствием добавлю в старт пост
    • 0
  7. Дипломник
    • Регистрация: 04.03.2013
    • Сообщений: 98
    • Репутация: 7
    Наконец-то внятная статья, с пояснениями! А то мне, как новичку, от большого количества размытой информации легко запутаться. Спасибо и Плюсую!!
    • 0
  8. Опытный Аватар для kenzo
    • Регистрация: 29.10.2012
    • Сообщений: 305
    • Репутация: 64
    • Webmoney BL: ?
    Как закрыть от индексации страницы с комментариями, которые имеют вид:
    http://***.ru/?p=173#comment-1391
    Я так понимаю, что знак решетки отсекает оставшуюся часть (воспринимается так, как будто за ней стоит комментарий)... Как быть в данном случае может кто подскажет?
    • 0
  9. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    kenzo, в robots.txt, который находится в старт-посте, такие ссылки запрещены правилом /*?*
    • 0
  10. Гуру Аватар для genjnat
    • Регистрация: 30.11.2010
    • Сообщений: 2,884
    • Репутация: 2594
    • Webmoney BL: ?
    Цитата Сообщение от genesis33 Посмотреть сообщение
    Для джумлы было бы интересно

    Развернуть текст


    User-agent: *
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /components/
    Disallow: /editor/
    Disallow: /help/
    Disallow: /includes/
    Disallow: /language/
    Disallow: /mambots/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /templates/
    Disallow: /installation/
    Disallow: /component/
    Disallow: /*index.php*
    Disallow: /*?start=
    Disallow: /*feed?type=

    Host:

    [свернуть]

    Усредненный, но не универсальный вариант, в некоторых случаях запрещать component или index.php нельзя.
    • 0
Страница 6 из 8 Первая ... 45678 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
SEO оптимизация форумов. Конкурсная статья
Оптимизация, SEO 25 17.08.2012 14:09
Азы Внутренней перелинковки сайта - asold (конкурсная статья)
Оптимизация, SEO 2 19.02.2012 21:38
Продвижение сайта в Twitter (конкурсная статья)
Социальные сети 13 03.11.2011 16:34
Признаки трастового сайта (конкурсная статья)
Обучающие статьи 14 26.10.2011 02:00
SEO оптимизация флеш сайтов - Конкурсная статья
Оптимизация, SEO 7 29.06.2011 01:44

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры