Всем привет, просветите в некоторых вопросах плиз. 1) После апдейта появились внешние ссылки на сайт с ресурсов http://spb-respect.ru/http://runblog.ru/. На данном микроблоге не зарегистрирован, сайту всего месяц, собственно вопрос не повредят ли сайту такие ссылки с мусорных микроблогов? 2) В логах заметил, что на сайт приходят боты кроме Яндекса и Гугла, к примеру www.majestic12.co.uk, нужно ли запрещать индексирование подобным или пусть заходят?
Последний раз редактировалось Alex_Web; 29.04.2016 в 13:40.
Как сам делаю: - Если со скользских тематик (пр-но и подобное) - то блок по имени домена и ip - Если бот слишком настырный и нагружает чрезмерно, и ненужных мне стран/регионов - блок - Если боты нехорошего списка (тут, конечно, самому смотреть нужно) - блок Остальные ip/боты, даже если видно, что скачивают материалы, но культурно (то есть приемлемый промежуток между запросами), и используют head|get - пожалуйста. Если же "долбятся" настырно по определенным url, и преимущественно POST - блок.
Ну, дак это же получаются практически естественные ссылки на ваш сайт. Ничего страшного от них не будет и пускай боты лазят, волноваться нужно, когда их нет
Надежный и отзывчивый VPS Хостинг для серьёзных проектов.