Как проверить, сколько ботов в Яндекс.Метрике: бесплатный инструмент и разбор результата

Если посещаемость выросла, а заявок не прибавилось, причина часто в ботах: они раздувают визиты, портят конверсию и мешают оценивать SEO и рекламу. Чтобы не гадать, мы с командой bot-guard сделали бесплатный инструмент: «Сколько ботов в вашей Метрике». Он берёт выгрузку визитов вашего счётчика и показывает, какая доля трафика пришла из датацентров и облаков и сколько прямых заходов закрылись за 0 секунд.

В этой статье разбираем, как устроена проверка, как читать отчёт и что делать, если ботов оказалось много.

• Цифры врут. Вы видите рост трафика, хотя живых людей не стало больше.
• Страдает конверсия. Знаменатель растёт, число заявок нет, и сайт выглядит хуже, чем есть.
• Решения принимаются по ложным данным. Рекламу и SEO оценивают по раздутому трафику.
• Растёт нагрузка. Боты ходят на сервер так же, как люди, а парсеры забирают контент и цены.

• Прямые заходы с отказом около 100% и временем на сайте 0 секунд.
• Всплеск посещаемости за один-два дня без рекламы и публикаций.
• Заходы только на карточки, архивы или служебные адреса, мимо главной.
• Десятки визитов с похожих IP-адресов одной сети.

Эти признаки показывают, что бот есть, но не говорят, откуда он и сколько его. Для этого нужен разбор по IP.

1. Вы входите через Яндекс и разрешаете доступ только на чтение к счётчикам Метрики.
2. Выбираете счётчик и период от 14 до 90 дней.
3. Инструмент создаёт выгрузку визитов через Logs API Метрики. Это занимает 1–3 минуты.
4. Для каждого визита определяется сеть. Если она принадлежит датацентру или облаку (AWS, Google Cloud, Tencent Cloud и другим), визит считается подозрительным.
5. Отдельно считаются прямые заходы с отказом за 0 секунд и сети, из которых пришло много таких визитов.

Токен хранится только в вашей сессии и удаляется после отчёта, выгрузка на стороне Метрики очищается сразу после разбора.

Мы прогнали через инструмент счётчик самого bot-guard.ru за 45 дней: из 2032 визитов около 87% пришло из датацентров, почти всё из сетей Tencent Cloud, а 95% прямых заходов были с отказом за 0 секунд. Живой трафик (органика и переходы) составил около сотни визитов. Без такого разбора мы бы считали эти цифры ростом аудитории.

• Доля из датацентров до 7%. Для большинства сайтов это норма: VPN и корпоративные сети.
• От 7 до 20%. Заметная доля, стоит посмотреть сети и источники.
• Больше 20%. Бот-трафик сильно искажает статистику.
• Подозрительные сети без провайдера. Если из одной сети много визитов и почти все с отказом за 0 секунд, это почти наверняка бот.
• Мало данных. Меньше сотни визитов за период: вывод делать рано.

Важно помнить об ограничениях: датацентр не равен боту (VPN), IPv6 пока не классифицируется, а боты с домашних и мобильных адресов через прокси по сетям не видны. Тогда смотрите на поведение.

В Яндекс.Метрике есть показатель роботности и отдельный отчёт про роботов: сервис помечает часть визитов как автоматические, но это только простые боты, которые легко распознать по признакам. Роботы на настоящих браузерах (например, headless Chrome), парсеры и накрутка поведенческих факторов проходят как обычные посетители и остаются в отчётах по источникам, отказам и глубине просмотра. Поэтому проверка по IP-сетям и поведению дополняет встроенный отчёт, а не заменяет его.

Если в счётчике включён Вебвизор, посмотрите записи подозрительных визитов: бот обычно остаётся на странице до 30 секунд, не листает, не читает и уходит резким движением указателя. Но записей мало, они выборочные, а ботнет присылает тысячи визитов. Для массового разбора удобнее выгрузка визитов с IP-адресами: именно её и использует наш инструмент.

Боты бывают разные: парсеры цен и контента, сканеры уязвимостей, спам-роботы форм и «накрутчики» поведенческих факторов, в том числе отрицательной накрутки, когда на сайт гонят визиты с мгновенным отказом, чтобы ухудшить его метрики. Во всех случаях в Метрике видны одинаковые следы: рост прямых заходов, отказы около 100%, время на сайте ноль секунд и визиты из одной сети или ботнета.

1. Не ограничивайтесь фильтрами Метрики. Они чистят отчёты, но нагрузку и парсинг не останавливают.
2. Блокируйте ботов на сервере. Сервис bot-guard отсекает датацентры и облака, подделки под поисковых роботов и спам в формы, а настоящие Яндекс, Google и Bing пропускает. Сейчас он бесплатный, есть плагин для WordPress и модуль для 1С-Битрикс.
3. Следите за результатом. Через несколько дней повторите проверку: доля из датацентров должна упасть, а конверсия вернуться к реальной.
4. Проверьте остальное. Список мер для владельца сайта есть в статье «Как защитить сайт от ботов и парсинга: чек-лист».

Нужна помощь с разбором статистики, настройкой защиты или внедрением на вашем сайте? Мы поможем: подробности на странице защиты сайта от парсинга и ботов.