Здравствуйте. Боты нагружают сайт и яндекс жалуется на скорость доступа.
Прошу помочь подобрать плагин. – Блокируем ботов, особенно тех, которые маскируются под ботов яндекса и прочие официальные сервисы, НО не блокируем настоящих от яндекса и т.п.
Почитал тут:
yandex.ru/support/webmaster/robot-workings/check-yandex-robots.html
их можно отличать.
Приложил лог.
- 08.04.2020 23:29
- 09.04.2020 18:53
Любые массовые продукты (плагины) обходятся ботами. Чтобы защититься от ботов нужно писать кастомное решение строго под определенный сайт.
Да, в Яндексе написано что нужно проверять принадлежность подсетей компании Яндекс. Можно это делать через WHOIS запрашивая каждый IP, это существенно "утяжелит" сайт. Можно парсить логи раз в час, собирать уникальные IP, проверять подсети один раз и перманентно банить всех фейковых яндексботов через deny в nginx. Вариантов много, но все требуют хороших навыков разработки.Спасибо сказали:
menedzher(10.04.2020),
Тэги топика:
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
Плагин вставки контекстнoй рeкламы в центр статьи через плагин джумлa | Joomla | 3 | 30.01.2014 14:29 |
Плагин загрузки картинки, плагин вывода текста из файла (WordPress) | WordPress | 2 | 12.02.2013 18:52 |
Использование ботов | Гемблинг | 11 | 20.06.2010 22:36 |
IP ботов гугла | Партнерские программы | 17 | 06.09.2009 02:21 |