Сайт вылетел из индекса ...

[xobotoff]

Доброго всем дня!
Решил спросить у вас совета что делать в такой ситуации.
Суть:
С 4-го марта стали приходить от яндекс-вебмастера письма такого содержания

Сайт ччччч.ru не был проиндексирован из-за настроек сервера, на котором он находится.

у робота Яндекса отсутствовал доступ к сайту, поэтому он не был проиндексирован. Уточните у Вашего хостера, не блокируется ли сейчас IP робота 178.154.205.251 на стороне сервера. Если доступ открыт, то статус сайта обновится в течение 2–3 дней.

отправил одно такое письмо Мультихосту (это тот самый хостер и есть) и в ответ мне написали "Ошибка исправлена"
8 марта после очередного апа несколько сайтов вылетели из выдачи и из ЯК вообще а некоторые "похудели"

Я написал жалобу и Сергей Новиков, Руководитель службы контроля качества компании MultiHOST ответил мне, что вины тут компании Мультихост никакой нет.

Разумеется, все известные адреса яндекса добавлены у нас в белые списки, однако логично,
иногда яндекс вводит новые сети о которых особо никого не уведомляет. Мы стараемся оперативно отслеживать
их, но конечно, это не так просто. Поэтому, в данной ситуации нашей вины нет, как только мы узнали о появлении нового адреса - сразу авторизовали его, о чем Вам и сообщили.

Коллеги! Подскажите пожалуйста где правды искать?

[kennivich]

Мне кажется тут все-таки вина хостера. Со своим не разу с таким не сталкивался.

[genjnat]

xobotoff, на другом хостинге.
Бан Яндекс бота, косяк непростительный.
А по поводу сайтов, не волнуйтесь - 1-3 апдейта - вернутся.

Со своим не разу с таким не сталкивался

Я сталкивался, и кстати говоря на вполне приличном хостинге (т.е - действительно, с любым может случится).
Но в моем случае, ТП не морозилась или отмазывалась, а сразу признали свою вину, исправили, попросили прощения и всячески заверили, что такого больше никогда не повторится.

[Kiwikov]

xobotoff, Однозначно бежите с такого хостинга. Вина 100% хостера, хочу уточнить. Сайт вылетел из Яндекс Каталога? Если да, то я бы советовал вообще обратиться в суд. Я бы такого хостеру не прощал. Или опишите данную ситуацию на подобных форумах, что бы люди знали, что с таким хостером лучше не связываться.

[-LIDER-]

однозначно вина хостинга (бан бота) ... с подобной ситуацией сталкивался мой знакомый ... жалобы не помогли и он быстренько переехал на новый хост благодаря чему сайт вернул все свои позиции очень быстро ... советую и вам так сделать, а виновника нужно расстрелять .

[xobotoff]

Kiwikov, вылетели те кто был, но сейчас вернулись, правда в выдаче пока сайтов нет. Приходят сообщения типа

Cайт sait.ru начал индексироваться.

ждем следующего апа яндекса, чтобы понять каков будет ущерб....
я еще и для того написал тут - чтобы коллеги задумались, выбирая себе хостинг.


Скажите, уважаемые веб-мастера, как мне аргументированно и убедительно составить им (Мультихосту) письмо с возражениями относительно их невиновности?

[WebPrib]

Ничего не даст. В договоре об услугах где-то сказано что они гарантируют индексацию сайта в яндексе? Сервер не ложился, был доступен - с их стороны всё чисто. Я с таким сталкивался неск лет назад на 2-х хостингах Мастерхост и Наунет, там же стоит автоматическая защита от ддос, если идёт очень много обращений к серверу, IP в чёрный список заносится. А боты ПС могут обращаться раз 10 в секунду да ещё и в несколько потоков. + маскируются выдавая себя за браузеры и подсетки IP постоянно меняют чтобы клоакинг обнаружить. Поэтому на сайтах в роботсе обязательно надо указывать таймаут обращения для ботов, типа: Crawl-delay: 5 Или свой сервак арендовать, что лучше, чтобы нагрузки ботов на соседей не влияли. На мастерхосте сотни сайтов тогда пострадали, на наунете аналогично, но через недельку в индекс вернулись с прежними позициями. Сбои сервера так же влияют, если не 500 ошибку выдаёт, а 404 но тоже всё возвращается через пару аппов.

[Dolmatov]

таймаут обращения для ботов, типа: Crawl-delay: 5

Если не ошибаюсь, то с этой строчкой про быстро роботов можно забыть.
У меня за 10 сек примерно 30 - 40 обращений с яндекс и гугла, по мима них ещё куча роботов.
От 10 сайтов у меня по 100 - 2000 запросов бывает в минуту.

P.S Меняйте хостинг на стабильный и качественный, сэкономив сегодня Вы можете завтра потерять в 5 раз больше денег и времени.

[WebPrib]

Dolmatov, Если не ошибаюсь, то с этой строчкой про быстро роботов можно забыть.

Ошибаетесь. На быстроробота это не влияет. Да и на основных тоже. Каждую ночь часа по 3 шуруют на сайтах, в каждый ап по неск тыс страниц в индекс добавляется что яши, что и гугла. Для гугла я 7 сек ставлю паузу. Это абсолютно нормальные значения. Может индексации и медленнее, но стабильнее. Чем сайт ляжет и вообще ничего не проиндексируется.

[Dolmatov]

WebPrib, Ну на обычном хостинге я думаю это целесообразно ставить, а вот на VPS и VDS нет такой необходимости.