YandexMobileBot на iPhone iOS 15.4: Что такое и как работает

YandexMobileBot 3.0 — поисковый краулер Яндекса. Обычно такие клиенты приходят для добавления страниц в поисковый индекс.

Яндекс запускает краулеры для обхода страниц сайтов и добавления их в поисковый индекс. Краулеры такого типа обычно приходят на сайт для обновления информации в поисковой системе.

Bot Guard видел этот User-Agent на 40 сайтах из 60 подключённых (67%). Первое появление в нашей статистике: 29.09.2023, последнее: 18.05.2025. Всего за это время зафиксировано 178 819 визитов. В среднем это около 299 визитов в день за 598 дней наблюдений.

По строке определяется: название клиента — YandexMobileBot версии 3.0; операционная система — iOS 15.4.1; тип устройства — iPhone; движок — WebKit 605.1.15. Часть токенов, например Mozilla/5.0 и KHTML, like Gecko, исторически есть почти у всех браузеров и ничего не говорят о реальном клиенте.

Вердикт: краулер или служебный бот. Основания: явных противоречий в строке нет; в статистике 40 сайтов, 178 819 визитов. Это оценка по строке и поведению, а не доказательство: по одному User-Agent нельзя гарантировать, что за ним бот или человек.

Настоящий поисковый робот создаёт умеренную нагрузку на сервер и нужен, чтобы страницы попадали в поиск. Системы статистики, как правило, не считают его визиты посещениями людей, но в журнале сервера он заметен. Резкий рост обращений стоит проверить на подделку.

Достоверный признак — IP-адрес, а не строка User-Agent. Сверьте его с официальной документацией компании Яндекс или подтвердите обратным и прямым DNS-запросом. Если адрес не из сетей компании Яндекс, это подделка, даже когда строка выглядит идеально.

Проверка занимает две команды. Сначала по IP запроса получаем имя хоста, оно должно оканчиваться на .yandex.ru, .yandex.net или .yandex.com. Затем по этому имени получаем IP обратно, адрес обязан совпасть с исходным. Если хотя бы одна проверка не прошла, запрос идёт не от Яндекс.

# 1. обратный запрос: имя хоста по IP
host 203.0.113.10
# 203.0.113.10 -> pointer crawler-example.yandex.ru

# 2. прямой запрос: IP по имени хоста
host crawler-example.yandex.ru
# адрес в ответе должен быть 203.0.113.10

Запросы этого клиента легко найти в журнале по подстроке «YandexMobileBot». Ниже примеры для подсчёта обращений, для nginx и для PHP. Строку лучше сверять без учёта регистра.

# сколько запросов в журнале nginx
grep -i "YandexMobileBot" /var/log/nginx/access.log | wc -l

# nginx: пометить запросы клиента
map $http_user_agent $is_client {
    default 0;
    ~*YandexMobileBot 1;
}

// PHP: определить клиента
if (stripos($_SERVER['HTTP_USER_AGENT'] ?? '', 'YandexMobileBot') !== false) {
    // ваша логика: пропустить, ограничить или заблокировать
}

Робот, соблюдающий правила, читает robots.txt до обхода страниц. Чтобы закрыть сайт целиком или только один раздел, добавьте правило с названием клиента. robots.txt рекомендательный: подделки и недобросовестные боты его игнорируют, для них нужна блокировка на сервере.

# закрыть весь сайт
User-agent: YandexMobileBot
Disallow: /

# закрыть только раздел
User-agent: YandexMobileBot
Disallow: /private/

# разрешить всё
User-agent: YandexMobileBot
Allow: /

Разрешите доступ роботу, подтверждённому по DNS, и проверьте в robots.txt, что важные разделы не закрыты. Подделки с этим же User-Agent блокируйте по IP.