[Vmir]

В вебмастер пишет что блокируют файлы robots.txt , я его вообще удалил.

Попробуйте заново создать его и выставить нужные права.

[pyramida]

В вебмастер пишет что блокируют файлы robots.txt

Гугл если получал в роботс не индексировать, может команду несколько дней помнить, даже после открытия. У меня помнил 4 дня, даже после нескольких просмотров. Ждать скорей всего нужно, поак он роботс новый возмет.
исправьте ошибку в первой строке, не ser-agent: * а User-agent: * должно быть.

[cccp1917]

У меня такая же история с Вордпрессом на Бегете кстати, файла нет а гугл пишет в админке что запрещен к индексации, есть мысль которая несколько бредовая что дело не в сайте а в самом гугле, скорее всего сайт выкинут из индекса + ручные меры и роботс не на сайте доноре а на сайте ГУГЛ... как бы это не звучало.

[romaamor]

Пропишите файл роботс в ручную, права робота - всё - да. И потом в панели управления сайтами гугла скормить адрес на robots.txt

[west0293]

Леонид Каруна,
с robots.txt сейчас все нормально. Просто у Вас мета-тег прописан на запрет индексации:

PHP код:

<meta name='robots' content='noindex,follow' /> 


из-за этого сыр-бор. Замените noindex на index или совсем удалите тег.

Скорее всего у вас просто стоит галочка "Попросить поисковые системы не индексировать сайт" в общих настройках. Снимите ее и будет счастье.

[Леонид Каруна]

west0293,
Спасибо большое!
Вы реально помогли, снял галочку, совсем забыл про нее в WP!