Как составлять robots.txt для joomla+jomsocial ?

(Ответов: 6, Просмотров: 1508)
  1. Banned
    • Регистрация: 26.05.2011
    • Сообщений: 380
    • Репутация: 34
    • Webmoney BL: ?
    Как составлять robots.txt для joomla+jomsocial , стандартный файл роботс joomla не канает?
    • 0
  2. Бесстыжий Аватар для HaXaL
    • Регистрация: 06.12.2011
    • Сообщений: 368
    • Репутация: 171
    канает:), толко будит не плохо добавить отдельно для яндекса,
    Вот robots с моего сайта

    Развернуть текст

    User-agent: *
    Disallow: *blog*
    Disallow: *feed*
    Disallow: /Tizer.php
    Disallow: /lost-user-name.html
    Disallow: /create-an-account.html
    Disallow: /contacts.html
    Disallow: /search.html?ordering=&searchphrase=all&searchword=
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    Disallow: /xmlrpc/
    Disallow: /torrentflux/
    User-agent: Yandex
    Disallow: *blog*
    Disallow: *feed*
    Disallow: /Tizer.php
    Disallow: /lost-user-name.html
    Disallow: /create-an-account.html
    Disallow: /contacts.html
    Disallow: /search.html?ordering=&searchphrase=all&searchword=
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    Disallow: /xmlrpc/
    Disallow: /forum
    Disallow: /cgi-bin
    Disallow: /torrentflux/
    Host: ваш сайт
    [свернуть]
    • 0
  3. Banned
    • Регистрация: 26.05.2011
    • Сообщений: 380
    • Репутация: 34
    • Webmoney BL: ?
    HaXaL, а что будет если я себе скопирую ваш робот? У нас могут папки по-разному называться?
    • 0
  4. Бесстыжий Аватар для HaXaL
    • Регистрация: 06.12.2011
    • Сообщений: 368
    • Репутация: 171
    romer,да могут, шаблоны я думаю у нас разные. советую не копировать, скинте сюда текст из вашего robots.txt, я подготовлю вам готовый вариант.
    • 0
  5. Banned
    • Регистрация: 26.05.2011
    • Сообщений: 380
    • Репутация: 34
    • Webmoney BL: ?

    Robots.txt

    User-agent: *
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /cli/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /logs/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    [свернуть]
    Последний раз редактировалось artorlov; 09.02.2012 в 23:02.
    • 0
  6. Бесстыжий Аватар для HaXaL
    • Регистрация: 06.12.2011
    • Сообщений: 368
    • Репутация: 171
    Вот так сделай, но если ты хочешь закрыть от индексации какую нибудь странице или категорию то добавь ее сюда, пример: Disallow: /create-an-account.html

    Развернуть текст

    User-agent: *
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /cli/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /logs/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/

    User-agent: Yandex
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /cli/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /logs/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    Host: ваш сайт

    [свернуть]


    П.С. потри ссылки от своего роботса в этой теме. в обще сотри все что начинается с #, не делай лишней работы для модераторов:)
    Последний раз редактировалось HaXaL; 07.02.2012 в 14:04.
    • 1

    Спасибо сказали:

    artorlov(09.02.2012),
  7. Banned
    • Регистрация: 26.05.2011
    • Сообщений: 380
    • Репутация: 34
    • Webmoney BL: ?
    Спасибо!
    Стереть вроде не могу, нет кнопки "редактировать"
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
FAQ по robots.txt
Дайджест блогосферы 12 12.02.2012 20:06
Помогаем составлять регулярные выражения
Web программирование 2 06.07.2011 11:09
Robots.txt
Обучающие статьи 12 30.06.2011 10:29
Анкор ссылки и как их составлять
Дайджест блогосферы 0 21.05.2011 15:32
Как правильно составлять анкоры ссылок
Дайджест блогосферы 0 02.08.2010 11:35

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры