Настройка robots.txt для инет-магазина.

(Ответов: 3, Просмотров: 484)
  1. Опытный
    • Регистрация: 10.11.2013
    • Сообщений: 347
    • Репутация: 28
    Очень нужна помощь, уже голову себе сломал. Есть инет магазин, сделан с интеграцией с 1С, причем сделан криво. Робот Яндекса загрузил 118215 а в индексе всего 256 страниц. Огромное кол-во страниц исключенных из-за того, что в индекс влетели страницы сортировки товаров. Как с этим разобраться я знаю, пропишу в роботс.тхт Disallow: /?FILTER и их исключу. Но вот как быть со страницами, которые были исключены в результате того, что на них можно попасть из категории брендов из категории названия товаров и т.д. Т.е. получается, что содержание страницы одно и то же, а вот урлы разные.
    Например страницы имеют вид:
    1)www.site.ru/katalog/?brending=....
    2)www.site.ru/katalog/?&items[]=....
    Причем, при переходе в карточку товара с первого урла карточка товара имеет урл типа: http://www.site.ru/katalog/559/30304...67&collection=
    А при переходе со второго урла: www.site.ru/katalog/539/3288727/
    Как с ними быть? Что нужно закрывать от индексации чтобы остался только один оригинал страницы?
    Даже не знаю, понятно ли описал свой вопрос и задачу...
    • 0
  2. Гуру
    • Регистрация: 09.10.2011
    • Сообщений: 1,813
    • Репутация: 251
    Что нужно закрывать от индексации чтобы остался только один оригинал страницы?
    исключайте из сканирования, параметр в урл который не нужен. И все для яши хватит. А вот с гуглм(если интересует) будут проблемы. Ему нужно в код страницы метатег ноиндекс вставлять. Или вручную через ВМТ удалять.
    • 0
  3. Сеошнег Аватар для DESTER
    • Регистрация: 15.02.2012
    • Сообщений: 454
    • Репутация: 112
    • Webmoney BL: ?
    А еще лучше в нагрузку <link rel="canonical" href="URL" />
    • 0
  4. Опытный
    • Регистрация: 10.11.2013
    • Сообщений: 347
    • Репутация: 28
    А еще лучше в нагрузку <link rel="canonical" href="URL" />
    Да уже решил поступить так: дал прогерам задание сделать ЧПУ + сделать отдельно по категориям товары, чтобы они не через фильтр открывались, чтобы чтопопалошные динамические страницы не отображались. Когда все будет готово, закрою в роботсе от индексации старые кривые страницы и сделаю карту сайта с новыми, адекватными. Надеюсь ПС-ы отнесутся к этому нормально.
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Подскажите агрегатор партнерок для небольшого инет-магазина лечебных трав
Партнерские программы 6 19.06.2013 02:00
Помогите придумать название для инет магазина
Оффтоп и свободные темы 6 07.06.2013 02:35
Нужен постинг на форумах для инет-магазина снегоуборщиков
Копирайтинг, переводы, постинг 1 31.10.2011 00:06
Правильная настройка Robots.txt
Дайджест блогосферы 0 31.08.2011 15:26
ROBOTS.TXT Зачем нужен, создание, настройка
Дайджест блогосферы 3 17.01.2011 11:31

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры