Чистая аналитика без ботов: как KinMetric отсекает парсеров и AI-сканеры

Утро понедельника: метрика «радует» аномалиями

Открываешь Яндекс.Метрику утром в понедельник и видишь: вчера на сайт зашли 1200 человек, а конверсий — всего 2%. Паника? Не спеши. Скорее всего, половина этих «визитов» — боты. Парсеры, AI-краулеры, headless-браузеры. Они приходят, что-то забирают и уходят, оставляя в отчётах мусор. Ты начинаешь дёргаться, грешить на рекламу, менять воронку, а проблема — в грязных данных.

Сервис KinMetric решает это одним движением. У него есть функция Bot Filter, которая вырезает из статистики весь нечеловеческий трафик. Не маскирует, а реально отделяет. И главное — делает это на двух уровнях: по списку известных ботов и по поведению.

Что такое Bot Filter и почему это не просто «блокировка роботов»

Большинство систем аналитики либо игнорируют ботов, либо пытаются фильтровать их по User-Agent. Но User-Agent подделать — раз плюнуть. Современные парсеры представляются Chrome на MacOS, а AI-краулеры (GPTBot, ClaudeBot, PerplexityBot) честно говорят, кто они, но их всё равно много. KinMetric идёт дальше.

Фильтр работает в два захода:

Первый уровень: чёрный список по User-Agent и IP

Отсекаются все известные поисковые и партнёрские боты: YandexBot (включая RenderResources, Images, News), Googlebot, Bingbot, AhrefsBot, SemrushBot, MJ12. Сюда же попадают AI-парсеры: GPTBot, ClaudeBot, PerplexityBot, Google-Extended, Bytespider, Meta-ExternalAgent, CCBot. И headless-инструменты: Puppeteer, Playwright, Selenium. А также Curl, Python-requests и прочие скрипты.

Если бот заявляет о себе — его сразу отбраковывают. Но это только половина дела.

Второй уровень: поведенческий детектор

Допустим, какой-то хитрый парсер притворяется человеком: ставит случайный User-Agent, загружает картинки, кликает. KinMetric смотрит на скорость действий. Если посетитель отправляет больше 5 событий за 10 секунд или больше 1 heartbeat за 25 секунд — он автоматически помечается как «поведенческий бот». Человек так не кликает. Даже самый быстрый пользователь не успевает за 10 секунд сделать 5 разных действий (переходов, скроллов, кликов) — это физически невозможно. А heartbeat (сигнал «я здесь») раз в 25 секунд — это норма для живого человека. Чаще — скрипт.

В итоге все эти визиты попадают в отдельную карточку «Bot traffic» на дашборде каждого сайта. Ты видишь, сколько ботов пришло и какие они, но они не влияют на основные KPI: сессии, конверсии, среднее время на сайте. Статистика остаётся чистой.

Реальный кейс: как «лишние» 40% трафика искажали отчёт

Один из наших пользователей — интернет-магазин сантехники. Средний чек — 15 000 рублей. В месяц — около 50 000 визитов. Владелец заметил: в некоторые дни конверсия падает с 3% до 1,5%, хотя реклама не менялась. Начал копать.

Подключил KinMetric с Bot Filter. Оказалось, что 40% трафика — боты. В основном — SemrushBot и AhrefsBot (они проверяли ссылки) и один AI-парсер, который скачивал описание товаров. После фильтрации реальная картина стала такой: не 50 000 визитов, а 30 000. Конверсия — не 1,5%, а честные 2,8%. Разница колоссальная.

Он перестал тратить деньги на «оптимизацию» под мнимый провал, а сосредоточился на настоящих проблемах: скорость загрузки страниц и форма заказа. Через месяц конверсия выросла до 3,2% — уже на реальных данных.

Без фильтрации он бы продолжал дёргаться и сливать бюджет на неверные гипотезы.

Как настроить Bot Filter в KinMetric: пошаговая инструкция

Ничего сложного. Всё делается за пару кликов. Вот порядок действий для нового пользователя:

Зарегистрируйтесь в KinMetric — процесс занимает минуту, нужен только email.

Добавьте свой сайт в личном кабинете — введите домен и получите код счётчика.

Установите код на сайт — вставьте его перед закрывающим тегом на всех страницах. Если используете CMS (WordPress, Tilda, Shopify), есть готовые плагины или инструкции.

Перейдите в раздел «Настройки» → «Фильтры» → включите тумблер «Bot Filter». По умолчанию он уже активен, но проверьте.

Откройте дашборд сайта — найдите карточку «Bot traffic». Там вы увидите, сколько ботов было отсечено и какие типы (поисковые, AI-парсеры, поведенческие).

Готово. Основные метрики (сессии, конверсии, источники) теперь показывают только живых пользователей.

Важный момент: вы можете в любой момент посмотреть статистику по ботам — она не удаляется, а просто выносится в отдельный блок. Это удобно для SEO-специалистов, которым нужно знать, как часто Googlebot или Ahrefs заходят на сайт.

Что вы получаете в итоге

Первое — честные цифры. Вы больше не принимаете решения на основе данных, раздутых ботами. Конверсия, отказы, глубина просмотра — всё становится реальным.

Второе — экономия времени и нервов. Не нужно гадать, почему вчера было 1000 посетителей, а сегодня 200. Не нужно рыться в логах, чтобы понять, кто эти «подозрительные» визиты. KinMetric делает это автоматически.

Третье — прозрачность для SEO. Если вы работаете с поисковыми системами, вы видите активность Googlebot, YandexBot, Bingbot отдельно. Это помогает понять, как часто поисковики индексируют сайт, не засоряя основную статистику.

Четвёртое — защита от AI-парсеров. Сейчас каждый второй стартап пишет своего краулера для обучения нейросетей. GPTBot, ClaudeBot, PerplexityBot, Google-Extended — они могут за день «съесть» весь ваш контент. Фильтр KinMetric не блокирует их доступ (это делается отдельно через robots.txt), но исключает из аналитики. Вы видите их активность, но она не портит отчёты.

Если вы устали от «мусорного» трафика и хотите видеть реальную картину — попробуйте Bot Filter в KinMetric. Бесплатный тариф позволяет протестировать всё на одном сайте. А если понадобится больше — посмотрите тарифы, там нет скрытых платежей.