[robotstxt]

В один из дней бот вконтакте повел себя довольно необычно. Сначала он посетил страницу примерно такого вида site.ru/razdel/adres-stranitsy, потом начал перебирать этот же урл по частям:
1. site.ru/razdel/adre
2. site.ru/razdel/adres
3. site.ru/razdel/adres-
4. site.ru/razdel/adres-str
5. site.ru/razdel/adres-stran
6. site.ru/razdel/adres-stranit
7. site.ru/razdel/adres-stranitsy

Естественно, в ответ получал 404 ошибки. Вот интересно, с какой целью он это делает? убеждается, что нет чего-то вредоносного, редиректов плохих и т.п.? не могу взять в толк смысл такого поведения. Это при том, что я привел сильно упрощенный пример, на самом деле такое разбиение урла может быть гораздо длиннее. Тут итак у хостера, видимо, проблемы и ошибка 502 стала всё чаще вылезать, так еще и бот производит совершенно лишнюю нагрузку. кто знает зачем ему это надо?

[egor63rus]

Думаете кто то посвящен в алгоритмы работы вк ? Лично я сомневаюсь. Имхо. А как вы отслеживали поведение бота?

[nikita_lacoste]

бот вконтакте

Как вы его вычислили?

[STRIJ]

Да и зачем боту ВК сканировать сторонние сайты? Он же не индексируется их, да и первый раз слышу про такого бота... наверно в танке?

[robotstxt]

egor63rus, nikita_lacoste, с помощью компонента j4age. ему доверяю, не раз себя оправдал точными данными.
STRIJ, бот вк, как и других соц.сетей появляется на сайте каждый раз когда лайкают материал. сколько раз нажмете на кнопку, столько раз бот и придёт, правда с твиттером немного не так, при одном твите приходит обычно два, а бывает и три их бота.
обычно все эти боты проводят на сайте секунду или меньше и только на той странице, которая лайкнута, потому и возник такой вопрос о странном поведении.
бот точно принадлежит вк, удостоверился по ip.