[r1pley]

Добрый день, помогите пож-ста. Что происходит с сайтом понять не могу. Весь контент купленный, уникальный (копирайт/рерайт), но каждый ап яндекса не радует, месяца 2 назад в индексе было более 300 страниц, сейчас осталось 180, вылетают в неделю 2-30 страниц, что делать прямо не знаю.... подскажите, в чем может быть проблема?
Продвигался сайт wizard'ом, но с иглы арендных ссылок уже снят, куплено в мире и ггл около 70 вечных ссылок. Контент обновляю каждый день по 3-7 статей, но все-равно, сайт вылетает... может с роботом что-то не так?

[Fish_su]

r1pley, ну адрес сайта в личку кинь, а то так, без доп инфы тебе здесь никто ничего не подскажет.

[HelgerLEE]

Ну, не надо, столь категорично, что никто и ничего. :)
Как вариант - может влиять скорость работы сервера. Если он медленно отдает страницы (проверяется по логам) - робот уходит с сайта, не проиндексировав даже того, что уже было в базе. Поможет директива robots.txt Crawl-delay: 5 (5 секунд паузы между загрузками страницы).
Если страницы пропадают и из Гугла - надо сам robots.txt проверить, возможно, случайно закрыли от индексирования раздел.

[r1pley]

Поставил Crawl-delay 4, а вообще, нижеприведенный роботс нормальный для вордпресса?

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /*comments
Disallow: /*comment-page
Disallow: /author/
Disallow: /search/
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: *feed*
Disallow: /*.php
Disallow: /*?*
Crawl-delay: 4

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /*comments
Disallow: /*comment-page
Disallow: /author/
Disallow: /search/
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: *feed*
Disallow: /*.php
Disallow: /*?*
Crawl-delay: 4

[HelgerLEE]

Google, насколько помню, Crawl-delay не использует, оставьте его только в Яндекс секции.

В остальном, вы взяли robots аналогичный этому (Правильно ли составлен файл robots.txt для Wordpress), так что не думаю, что проблемы из-за самого robots.txt.

[Rlove]

HelgerLEE, а какие еще могут быть причины подобного явления?
Просто ситуация 1 в 1 как у ТС (только ссылки не закупались). Страницы начали потихоньку выпадать из индекса. С хостингом и роботсом, думаю все нормлаьно (есть аналогичный проект и чувствует он себя отлично).
Яндексоиды посоветовали "работать над сайтом"

[HelgerLEE]

Rlove, "Яндекс его знает, почему..." :)

У меня на одном из проектов на копипасте была "волна". Индекс с периодичностью в 4 апа колебался на 200, примерно, страниц. Всего было 1200. Вот гулял от 1000 до 1200 несколько лет. Потом пришел АГС-40 и унес все.
На текущем проекте пример, конкурент стянул контент - моя страница выпала. Теперь большие тексты только через сервис анонсов Яндекса, тогда живут. Так что время от времени проверяйте основные материалы на уникальность, возможны неприятные удивления.
Из редких причин - не очень хороший DNS-сервис (был как-то freedns.ws указан у меня, их ддосили месяц, наверное, а у меня один проект вылетел целиком) и какие-то глюки непосредственно в CMS (отдается код страницы отличный от 200). И, однажды, переигрался с настройками All in SEO и отрубил в параметрах почти всю индексацию. Глупо, но искал потом очень долго причину.

[DOleg]

Disallow: /*.php

Не в этой строке ли проблема?

[HelgerLEE]

DOleg, по идее - отсечка динамических страниц (результаты поиска). Хотя, при определенных условиях, например, при отсутствии ЧПУ, согласен - убийство всего. :)

Надо, чтобы ТС проверил в ЯВМ какой-нить свой URL и отписался о результатах.

[r1pley]

HelgerLEE, ЧПУ есть, без него уже несколько лет никуда) По поводу страниц - часть проиндексирована, часть свободно добавляется в индекс. Платон ответил, что все нормально, с их стороны санкций не было...