[r2d2]

wicked_kiD, для чего вы расписываете отдельно в robots.txt для Яндекса и Google?

а ты что, незнаешь зачем? Ну какой с тебя сеошник :)))))))

Да видимо, просто это новичёк и не разбирается во многом, зачем наводящие вопросы на то что он не совсем умный :)

[stArik]

В google webmasters tools есть инструмент для генерации robots.txt :)

[dmg.shark]

Да видимо, просто это новичёк и не разбирается во многом, зачем наводящие вопросы на то что он не совсем умный

Ну вдруг есть какая-то "фишка" :) Вообще, это в некоторой степени удобно: когда придется написать что-то только для Яндекса, то дописал одну строку и все, не приходится копировать потом все - все уже готово. Только вот у меня таких случаев не бывает :)

[Twin]

На своём блоге пользуюсь таким robots.txt

Код:

User-agent: *
Allow: /wp-content/uploads/
Disallow: */comment-page
Disallow: */comments/
Disallow: */feed/
Disallow: */trackback/
Disallow: /category/
Disallow: /page/
Disallow: /tag/
Disallow: /wp-
Disallow: /xmlrpc.php
Disallow: */?*

Ну и плюс надо добавить Host и Sitemap для лучшего эффекта

[dmg.shark]

Host работает для Яндекса В теме про Google :)

[wicked_kiD]

wicked_kiD, для чего вы расписываете отдельно в robots.txt для Яндекса и Google?

А почему бы и нет? Это никаким негативным образом не влияет ни на что...

[Twin]

Host работает для Яндекса В теме про Google

Ах да, верно. Мой косяк :)

[dmg.shark]

А почему бы и нет? Это никаким негативным образом не влияет ни на что...

А как же чистота кода, например? :) Накомментируйте еще кучу всего, тоже плохо от него не будет :)

Оптимизация должна быть оптимизированной! Зачем лишние буквы?!

[wicked_kiD]

Есть необходимая оптимизация, но делать ее фанатичной и бороться за 20 символов - это не так уж и важно, на мой взгляд. У каждого свои подходы, сколько людей - столько и мнений...

[matias]

свои подходы, сколько людей - столько и мнений...

не соглашусь, мнение 1, нет 2 - это яндекс и гугл, а вот то что мнения бывают разные это другой вопрос и мне кажется у каждого есть те или иные доводы по поводу своего мнения как надо оптимизировать, и это решает

и я соглашусь с dmg.shark - оптимизация на то и оптимизация, что б не было ничего лишнего