Любую, разницы нет. По эксперементируйте с тем же вебмастером Яндекса.
- 18.04.2012 21:20
- 23.04.2012 20:39
Немного изменил Robots.txt:
# This virtual robots.txt file was created by the PC Robots.txt WordPress plugin.
# For more info visit: http://petercoughlin.com/robotstxt-wordpress-plugin/
User-agent: Yandex
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: */trackback
Disallow: */feed
Disallow: /cgi-bin
Disallow: *?s=
Allow: /wp-content/uploads/
Host: site.ru
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: */trackback
Disallow: */feed
Disallow: /cgi-bin
Disallow: *?s=
Allow: /wp-content/uploads/
Sitemap: _http://site.ru/sitemap.xml
Дождался посещения роботом - ничего не дало
Может быть есть человек, с которым мы могли бы связаться по скайпу или ICQ и который мог бы помочь выяснить в чем проблема? - 23.04.2012 20:48Код:Поставь так!!
User-agent: Yandex Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: /wp-content/plugins Disallow: /wp-content/themes Disallow: /wp-login.php Disallow: /wp-register.php Disallow: */trackback Disallow: */feed Disallow: /cgi-bin Disallow: *?s= Allow: /wp-content/uploads/ Host: site.ru Sitemap: _http://site.ru/sitemap.xml User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: /wp-content/plugins Disallow: /wp-content/themes Disallow: /wp-login.php Disallow: /wp-register.php Disallow: */trackback Disallow: */feed Disallow: /cgi-bin Disallow: *?s= Allow: /wp-content/uploads/ Sitemap: _http://site.ru/sitemap.xml
- 23.04.2012 21:23
Green-Seo, сделал. После посещения роботом - отпишусь.
- 02.05.2012 18:59
Green-Seo, Спасибо! Теперь по данным Yandex Webmaster, страницы новостей не являются исключенными.
Жду посещения робот - надеюсь, что они будут проиндексированы ... - 05.05.2012 22:02
После довольна-таки долгой задержки с индексацией, написал в службу поддержки. Вот что ответили:
Это нормально? Или просто, мне так "повезло"?Здравствуйте!
Часть страниц, действительно, отсутствует в результатах поиска, при этом никаких санкций на них не наложено.
Наши алгоритмы устроены так, чтобы на запросы пользователей давать наиболее полный ответ, и в связи с этим в результаты поиска попадают наиболее релевантные и уникальные страницы сайтов:
_http://help.yandex.ru/webmaster/?id=1114408 .
При этом наш робот помнит о других страницах сайтов; если на них присутствуют ссылки, он периодически переобходит их, и со временем они также могут быть включены в результаты поиска.
Мы всегда работаем над совершенствованием алгоритмов, принимающих решение по включению тех или иных страниц в результаты поиска, и примеры страниц Вашего сайта переданы в поисковый отдел нашей компании для анализа и последующей корректировки алгоритмов. Внесение изменений в алгоритмы - достаточно сложный процесс, который требует времени, так как затрагивает много различных сайтов.
--
С уважением, Платон Щукин
Служба поддержки Яндекса
_http://help.yandex.ru/
Тэги топика:
- cgi-bin,
- disallow,
- host,
- plugins,
- robots,
- site,
- sitemap,
- themes,
- trackback,
- uploads,
- user-agent,
- wp-admin,
- wp-comments,
- wp-content,
- wp-feed,
- wp-includes,
- wp-login,
- wp-register,
- wp-trackback,
- _http,
- быть,
- директива,
- индексация,
- новость,
- проблема,
- роботс,
- сайт,
- страница
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
FAQ по robots.txt | Дайджест блогосферы | 12 | 12.02.2012 20:06 |
robots.txt | Web программирование | 4 | 10.08.2011 14:47 |
Robots.txt | Обучающие статьи | 12 | 30.06.2011 10:29 |
robots.txt | Вопросы от новичков | 3 | 18.03.2011 15:03 |
dle robots.txt | Web программирование | 3 | 08.01.2011 22:16 |