Комментарии в выдаче поисковиков

(Ответов: 4, Просмотров: 431)
  1. Студент
    • Регистрация: 17.11.2011
    • Сообщений: 65
    • Репутация: 1
    Всем привет. На новом сайте в выдачу попали комментарии, которые не должны были индексироваться. Вот роботс

    robots.txt

    User-agent: *
    Disallow: /wp-login.php
    Disallow: /wp-register.php
    Disallow: /webstat/
    Disallow: /feed/
    Disallow: /trackback
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments
    Disallow: /*?*
    Disallow: /*?
    Disallow: /wp-content/
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /comments
    Disallow: /popular
    Disallow: /profile-edit
    Disallow: /viewed
    Disallow: /contact
    Disallow: /tag/

    User-agent: Yandex
    Disallow: /wp-login.php
    Disallow: /wp-register.php
    Disallow: /webstat/
    Disallow: /feed/
    Disallow: /trackback
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments
    Disallow: /*?*
    Disallow: /*?
    Disallow: /wp-content/
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /comments
    Disallow: /popular
    Disallow: /profile-edit
    Disallow: /viewed
    Disallow: /contact
    Disallow: /tag/
    Host: mysite.com

    Sitemap: _http://mysite.com/sitemap.xml
    Sitemap: _http://mysite.com/sitemap.xml.gz
    [свернуть]

    Также стоит виджет последних комментариев, из него тоже, те же самые комментарии в выдаче. Дублей в поиске с одного коммента немереное количество. Как их можно полностью от индексации закрыть, вместе с виджетом? Спасибо.
    • 0
  2. Опытный Аватар для NightHawk
    • Регистрация: 12.08.2011
    • Сообщений: 467
    • Репутация: 152
    Находите в коде где выводятся комментарии и пишите <!--noindex--> и в конце кода <!--/noindex-->, с модулем та же схема. Через robots закрывается только что, что содержится в url.

    Может не совсем понял, какие дубли у вас проиндексировались, поэтому скидывайте часть url поможем прописать в robots правильно.
    Юзаю этот хостинг с приятными ценами
    • 0
  3. Опытный Аватар для doctordick
    • Регистрация: 03.09.2009
    • Сообщений: 302
    • Записей в дневнике: 1
    • Репутация: 60
    Все, что Вы видите в исходнике страницы - видит и бот от ПС. noindex совсем не панацея для Гоши.
    В Вашем случае может помочь такой вариант: выдавать комментарии только зарегистрированным (авторизованным) пользователям, соответственно для ботов от ПС комментарии останутся недоступными.
    • 0
  4. Студент
    • Регистрация: 17.11.2011
    • Сообщений: 65
    • Репутация: 1
    doctordick, такой вариант может и хороший, но не подходит. Раньше вот этим как-то обходилось (Disallow: /comments), теперь видимо недостаточно
    • 0
  5. Опытный Аватар для doctordick
    • Регистрация: 03.09.2009
    • Сообщений: 302
    • Записей в дневнике: 1
    • Репутация: 60
    doctordick, такой вариант может и хороший, но не подходит. Раньше вот этим как-то обходилось (Disallow: /comments), теперь видимо недостаточно
    Нет, ну Вы сами подумайте, что значит Disallow: /comments
    Не брать в индекс URI начинающиеся с /comments, а теперь вопрос, если у Вас обычный пост /post1.html и в нем есть комментарии, что сделает ПС?
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Закрытее категорий от поисковиков.
Общие вопросы поисковой оптимизации 3 26.05.2012 00:11
Трафик с поисковиков
Партнерские программы 9 02.12.2010 17:05
Оптимизация pdf формата для поисковиков
Дайджест блогосферы 0 06.09.2010 12:51

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры