Статьи о кибербезопасности и ботах

Кибербезопасность

Почему поисковые боты не видят сайт: как проверить robots.txt, noindex и редиректы

Почему Google и Яндекс не обходят сайт: закрыт Googlebot в robots.txt, стоит noindex, ошибка robots.txt или файрвол режет ботов. Как проверить за минуту и что и…

4 мин Читать →

Кибербезопасность

Как закрыть сайт от GPTBot, ClaudeBot и других ИИ-ботов: robots.txt, nginx, .htaccess

Как запретить GPTBot, ClaudeBot, CCBot и Bytespider обходить сайт: готовые правила для robots.txt, nginx и .htaccess, что не закрывать и почему robots.txt не ос…

4 мин Читать →

Кибербезопасность

Роботность в Яндекс.Метрике: что это, где смотреть и как считается

Что такое роботность в Яндекс.Метрике, как посмотреть долю визитов с роботами, как Метрика определяет роботов и что она не видит. Короткие ответы и бесплатная п…

4 мин Читать →

Кибербезопасность

Расшифровка User-Agent: Chrome 115, Redmi, Яндекс Браузер и WebView по частям

Как расшифровать строку User-Agent по частям: что значат Mozilla/5.0, Chrome/115.0.0.0, Android 10; K, arm_64, YaApp, wv. Разбор реальных строк и бесплатная про…

4 мин Читать →

Кибербезопасность

Bot Guard, Cloudflare, SmartCaptcha и fail2ban: сравнение защит от ботов

Чем отличаются Bot Guard, Cloudflare, Яндекс SmartCaptcha и fail2ban: где стоят, что проверяют, что защищают, сколько усилий нужно и кому что подойдёт. Таблица …

4 мин Читать →

Кибербезопасность

Защита сайта от ботов на nginx через auth_request: установка Bot Guard без плагинов

Как подключить Bot Guard к сайту на nginx без плагина CMS: шлюз auth_request, конфиг, страница проверки браузера, проверка работы и подводные камни. Готовый арх…

5 мин Читать →

Кибербезопасность

Спам-заявки и фейковые регистрации на сайте: как остановить (с проверенным кодом)

Как остановить спам-заявки и фейковые регистрации на сайте: honeypot, время заполнения, проверка Referer в nginx, ограничение частоты, капча и защита от ботов. …

9 мин Читать →

Кибербезопасность

DDoS-защита и защита от ботов: в чём разница и что выбрать (DDoS-Guard, Qrator, Cloudflare)

Чем отличается защита от DDoS от защиты от ботов, что делают DDoS-Guard, Qrator и Cloudflare, что с Cloudflare в России и как выбрать защиту для сайта. Сравнени…

7 мин Читать →

Кибербезопасность

Яндекс SmartCaptcha: как подключить, сколько стоит и чем дополнить

Как подключить Яндекс SmartCaptcha к форме: виджет, невидимая капча, серверная проверка токена на PHP. Цены по справке Яндекса, квоты, ограничения и защита без …

8 мин Читать →

Кибербезопасность

Боты на сайте: 21 тип автоматизированных угроз по классификации OWASP

Классификация OWASP Automated Threats на русском: 21 тип атак ботов от скрейпинга и credential stuffing до скликивания. Как каждый выглядит на сайте и что смотр…

12 мин Читать →

Кибербезопасность

Fail2ban и nginx: как блокировать ботов по access-логу (готовые фильтры)

Как настроить fail2ban для nginx: фильтры для сканеров и скриптовых User-Agent, jail, ограничение частоты и белый список. Конфиги проверены fail2ban-regex и ngi…

8 мин Читать →

Кибербезопасность

Поведенческие боты в Яндекс.Метрике: как их найти и отличить от людей

Как найти поведенческих ботов в Метрике: роботность по источникам, одинаковые отпечатки, сети датацентров, окно браузера. Что считать признаком, а что нет. Бесп…

5 мин Читать →