Тонкости настройки robots.txt для разных CMS [Конкурсная статья]

(Ответов: 71, Просмотров: 26979)
Страница 5 из 8 Первая ... 34567 Последняя
  1. Опытный
    • Регистрация: 04.09.2009
    • Сообщений: 334
    • Репутация: 93
    • Webmoney BL: ?
    CherVal, можно и не использовать, а можно использовать грамотно :)

    Например, сайт о фильмах, у нас есть: жанр, год, страна (как минимум)

    Можно сделать 3 вида категорий соответственно. И размещать фильм сразу в 3х категориях.
    Можно НЕ делать 3 вида категорий, но тогда теряется удобство для юзера. Ведь он может искать не конкретный фильм "Бэтмен 2012", а "лучшие фильмы 2012 года" или "лучшая фантастика" или "лучшие фильмы Франции", что ему выдавать в поиске?

    Вот я просто метками заменяю одну из категорий, и получается, допустим: жанр, страна - категории, год - метки.
    • 0
  2. Студент
    • Регистрация: 07.03.2012
    • Сообщений: 452
    • Репутация: 99
    • Webmoney BL: ?
    Спасибо за статью.
    С то всегда пользовался стандартным роботсом, а этот роботс взял на заметку.
    Удачи в конкурсе!
    • 0
  3. Студент Аватар для HAPKO3
    • Регистрация: 23.09.2011
    • Сообщений: 36
    • Репутация: 5
    Всё зависит от задачи. К примеру для SAPE подобные роботы это только потеря денег.

    Для ПС это тоже спорный момент. Особенно для устоявшегося сайта. Любые заметные изменения в роботе ведут к шторму сайта. Нее, нее, нее...

    Эрго:
    Если сайт новый, если он не под ссылки, то тогда да. Если вы продаёте ссылки, если сайт старый, то не трогаем.
    • 0
  4. Дипломник Аватар для whitik
    • Регистрация: 28.08.2010
    • Сообщений: 178
    • Репутация: 65
    • Webmoney BL: ?
    Привет, спасибо за хорошую статью, меня интересует один вопрос, как закрыть от индексации такие страницы: _http://whitik.ru/opros.html/opross ??? Такая страница создается, когда картинка в статье имеет ссылку и получается, что создается отдельная страница. Можно конечно удалить ссылку из изображения, но как в robots закрыть от индексации такие страницы?
    • 0
  5. Новичок
    • Регистрация: 11.09.2009
    • Сообщений: 5
    • Репутация: 11
    Видно человек знает тему. Спасибо .
    • 0
  6. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    whitik, в robots.txt сделать это действие массово не получиться. Ссылка будет разной для каждой страницы. Закрывать можно по отдельности
    Disallow: /opros.html/opross

    А еще лучше не создавать таких страниц. Используйте ссылку на картинку, а не на страницу картинки, WP позволяет это делать одним легким движением:
    Последний раз редактировалось MacLeo; 11.09.2012 в 22:00.
    • 0
  7. Дипломник Аватар для whitik
    • Регистрация: 28.08.2010
    • Сообщений: 178
    • Репутация: 65
    • Webmoney BL: ?
    MacLeo,
    Спасибо за ответ, а то он мучил меня не один месяц!)) Я решил эту проблему путем удаления ссылки на картинку. Ваш роботс взял для своих сайтов, спасибо.
    • 0
  8. Студент
    • Регистрация: 09.04.2010
    • Сообщений: 86
    • Репутация: 8

    Нужно ли закрывать папку languages? и вот эти файлы wp-cache-config.php, advanced-cache.php? Для чего они? И подскажите, если знаете, где можно почитать про назначения всех папок у wp?, что можно закрыть а что нет.
    Последний раз редактировалось Werdik; 27.09.2012 в 10:54.
    • 0
  9. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    Werdik, эту папку закрывать нет смысла.
    • 0
  10. Студент
    • Регистрация: 09.04.2010
    • Сообщений: 86
    • Репутация: 8
    MacLeo, а wp-cache-config.php, advanced-cache.php? Тоже закрывать нет смысла? Чьи это файлы можете сказать?
    • 0
Страница 5 из 8 Первая ... 34567 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
SEO оптимизация форумов. Конкурсная статья
Оптимизация, SEO 25 17.08.2012 14:09
Азы Внутренней перелинковки сайта - asold (конкурсная статья)
Оптимизация, SEO 2 19.02.2012 21:38
Продвижение сайта в Twitter (конкурсная статья)
Социальные сети 13 03.11.2011 16:34
Признаки трастового сайта (конкурсная статья)
Обучающие статьи 14 26.10.2011 02:00
SEO оптимизация флеш сайтов - Конкурсная статья
Оптимизация, SEO 7 29.06.2011 01:44

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры