Привет, уважаемые форумчане, форумчанки и форумчата :) Ситуация:
Имеется сайт заказчика (интернет магазин), данные в яндекс-вебмастере: загружено роботом 111376 страниц, в поиске 224 страницы, исключено роботом 23755 страниц (99% из них по ошибке 404).
Заранее должен оговориться, что уже не в первый раз замечаю такую же ситуацию с инет-магазинами.
Вопросы:
1. 111376-23755 не равно совсем 224, т.е. получается, что страницы (кроме исключенных роботом) так же не в индексе. Возникает вопрос почему? Поисковик всегда выкидывает из индекса, например, карточки товаров и оставляет только страницы категорий? Или же это что-то не то с сайтом, что столько страниц не индексируется?
2. Как поступать с 23755 страницами с ошибкой 404, их нужно закрывать в роботсе или вы просто забиваете на такие вещи, когда они встречаются?
3. Как вы вообще подходите к работе над инет магазинами заказчиков? Понятно, что когда проект свой, то все делаешь чинно-благородно, можно и потратить месяц на исправление всяких косяков, но вот как быть с сайтами заказчиков. Например, попадается инет магазин с нескольким десятком тысяч страниц с кривыми ЧПУ. По-хорошему их нужно настроить на правильные, но ведь это столько гемора прогерам + редиректов нужно будет потом кучу наставить, выявить все страницы, какая на какую будет вести и т.д. Как вы поступаете в подобных случаях?
Всем заранее спасибо за ответы.
- 02.02.2014 11:52
- Регистрация: 10.11.2013
- Сообщений: 347
- Репутация: 28
- 02.02.2014 12:26
Та же проблема, робот находит 800, в индексе только 200
- 02.02.2014 13:15
Fish_su, робот яндекса выкидывает из индекса дубли. Лучше всего сделать это самому.
Я делаю так:
1. Делаю список всех страниц сайта (карта сайта)
2. Нахожу дубли страниц. Если ЧПУ настроены правильно - дублями считаю страницы со всякими /rek=&hjvjhhvj и т.д.
3. Захожу в вебмастерс яндекс и составляю робот.тхт - для каждой страницы, которую закрываю - проверяю не пропадёт ли нормальная страница.
4. Жду отвала дублей.
По вашим вопросам:
1.не понятная ситуация. Смотрите роботс.тхт - может из-за него карточки товаров выкидваются, а категории - наоборот. В составлении правильного роботса и проверки запрета идексировании страницы используйте: http://webmaster.yandex.ru/robots.xml - там внизу "Список УРЛ" - вставляйте ссылку и увидите результат
2.Я просто забиваю на них, но можно и роботсом запретить... если это не ошибки сервера - меняйте хостинг)
3. я несколько раз делал магазины на опенкарте. Первое и самое главное - настраиваю ЧПУ. Дальнейший гемор сразу пропадает. - 02.02.2014 13:24Создали карточку - товар закончился - убрали карточку - 404 осталась висеть.(99% из них по ошибке 404)
Сделайте 301-й редирект с них на категории или на действующие карточки товаров. - 02.02.2014 15:39
- Регистрация: 10.11.2013
- Сообщений: 347
- Репутация: 28
Это понятно.Создали карточку - товар закончился - убрали карточку - 404 осталась висеть.Шутите? Сделать 23755 редиректов? Сами пробовали? На это месяц чистого времени уйдет. Отыскать все эти страницы и отыскать те, на которые должен идти редирект.Сделайте 301-й редирект с них на категории или на действующие карточки товаров. - 02.02.2014 18:28
- Регистрация: 09.10.2011
- Сообщений: 1,814
- Репутация: 251
вот это делать не рекомендуется.Создали карточку - товар закончился - убрали карточку - 404 осталась висеть.
Сделайте 301-й редирект с них на категории или на действующие карточки товаров.
---------- Сообщение добавлено 18:58 ---------- Предыдущее 18:54 ----------
а это и есть работа по "оптимизации сайта" :)Шутите? Сделать 23755 редиректов? Сами пробовали? На это месяц чистого времени уйдет. Отыскать все эти страницы и отыскать те, на которые должен идти редирект.
Сами страницы есть? Или удалены? Проверьте, что эти страницы отдают именно код 404, а не 200. По идее должны отвалится давно.
Сделайте то, что рекомендовал Gann скачайте программу Xenu и посмотрите где эти ссылки есть на сайте(в списке правой кнопкой и пропертис) и удалите с страниц. - 02.02.2014 18:38
- Регистрация: 10.11.2013
- Сообщений: 347
- Репутация: 28
pyramida, привет, а ты с такими ситуациями сталкивался, как я описал? Какие-нибудь решения можешь предложить?
---------- Сообщение добавлено 17:38 ---------- Предыдущее 17:29 ----------
pyramida, привет, а ты с такими ситуациями сталкивался, как я описал? Какие-нибудь решения можешь предложить?Страниц нет точно, да 404 отдает. А на них забить не вариант? Т.к. товары в любом случае добавляются, удаляются и переносятся и это постоянный эффект, каждый раз гоняться за удаленными страницами накладно. Большое кол-во 404 страниц вообще негативно влияет на ранжирование или можно просто забить?Сами страницы есть? Или удалены? Проверьте, что эти страницы отдают именно код 404, а не 200. По идее должны отвалится давно.
Сделайте то, что рекомендовал Gann скачайте программу Xenu и посмотрите где эти ссылки есть на сайте(в списке правой кнопкой и пропертис) и удалите с страниц.
Ну и вопрос №1 очень волнует. - 02.02.2014 18:44
- Регистрация: 09.10.2011
- Сообщений: 1,814
- Репутация: 251
Fish_su, тебе уже даже план действий расписали. Что еще нужно? Сделать может за тебя? :)
Делал такое конечно уже.
---------- Сообщение добавлено 19:14 ---------- Предыдущее 19:12 ----------
не должно быть с страниц сайта много ссылок на 404 страницы. Пинка получить можно из ПС. Если лень, найди кто сделает.А на них забить не вариант? - 02.02.2014 18:45
Подходить к вопросу об оптимизации все страниц надо с понимания четкой цели итоговой. Для чего вам это?
Вы через рекламу продаете товар, либо пытаетесь продвинуться по запросам.
Также Вам довольно ясно сказали, если хотите загнать страницы в поиск, уберите дубли.
Дубли можно убрать на основе пару десятков страниц.
Выясните, сколько видов дублей создает ваш сайт и ведет на одну страницу. Оставьте ЧПУ, остальные закройте.
А по какой причине выкидывает ПС вас, причин много.
Это дубли страниц
Дубли title
Дубли Description
Может у вас описаний нет
Может страницы с ошибкой в коде, и тд тп. - 02.02.2014 21:33вот это делать не рекомендуется.pyramida, я нахожу противоречие в ваших высказываниях.а это и есть работа по "оптимизации сайта" :)
Почему этого делать не рекомендуется со страниц с 404 ответом?Сделайте 301-й редирект с них на категории или на действующие карточки товаров.
Тэги топика:
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
robots.txt | Общие вопросы поисковой оптимизации | 5 | 23.06.2013 00:40 |
robots.txt | Вопросы от новичков | 9 | 23.04.2013 20:23 |
АГС или robots.txt | Вопросы от новичков | 11 | 04.12.2012 20:37 |
Все о robots.txt | Общие вопросы поисковой оптимизации | 19 | 03.07.2012 12:46 |
robots.txt | Прочее | 0 | 18.03.2011 10:44 |