[ruslang84]

Сейчас работаю над одним сайтом. Проверил индекс. В Яндексе и Гугле сидят по 200+ страниц типа site.ru\nazvanie-posta\photo-001.
На сайте раньше не было файла robots.txt и сотни фото попали в индекс, как отдельные страницы.
Чтобы удалить их нужно:
1. Запретить их индексирование в robots (отдельно для каждой страницы, а это более 200(!) строк).
2. Добавить страницы в очередь на удаления в Яндексе (каждую по отдельности).
3. Отправить запрос гуглу на временное скрытие страниц из индекса.

Не хочется все это делать вручную. Есть ли способы как-то автоматизировать или ускорить процесс? Хотя-бы c robots...

[Gann]

ruslang84, в роботс можно добавить:

Disallow: */photo-

по остальному я бы не заморачивался... вы посмотрите, вполне возможно что по таким страницам ещё и трафик есть, правда с большими отказами..

[ruslang84]

Gann,

в роботс можно добавить:
Disallow: */photo-

Не подходит. Для многих фото прописано не "photo-", а название фото на латинице (например, \audi-001, \belaja-beha и т.п.)

[Gann]

ruslang84, ну, вы указали photo, я и написал для photo)

Тогда можно пробовать прописать так:

Disallow: *.jpg
Disallow: *.png
Disallow: *.gif

Это если картинки в формате джипег, пнг и гиф. Думаю в таком случае надо будет дополнительно прописать отдельной секцией разрешение на индексацию для картиночных роботов.

п.с. нет... кажется я понял вашу проблему... сейчас ещё подумаю...

какой движок на сайте?

[ruslang84]

Gann, сейчас ничего лишнего в индекс не попадает. Видимо, пару лет назад не было роботса.
В том-то и проблема, что фото прописываются без расширений, просто названия...

Видимо, придется удалять вручную.
Кстати, заметил что Яндекс выкидывает их из индекса примерно в течении получаса после запроса.