TDS.SO
Потоки и фильтр ботов

Фильтрация ботов: уровни и списки

Фильтр ботов решает, какие переходы считать ботами: четыре уровня от «Выкл» до «JavaScript», действие для ботов, карантин и свои списки IP и User-Agent.

Фильтр решает, какие переходы считать ботами. Он задаётся в шаблоне (режим «Ссылки») или в кампании (режим «Трекер») и действует на все ссылки. Клик бота не проходит по потокам и не попадает на адрес назначения, а в статистике считается отдельно. В карточке клика видно, почему фильтр счёл переход ботом: карантин, первые клики, чёрный список, реферер, проверка в браузере и другие причины.

Настройки лежат в блоке Настройки ботов и в Дополнительные настройки. В кампании основные из них собраны в поле Боты, см. ниже.

Уровни

УровеньКогда подходит
Выклпроверка не нужна, например для своих тестов. Переходы не проверяются совсем, см. ниже
Стандартотсеивает явную автоматизацию и меньше рискует задеть живых людей
Высокийстроже; стоит по умолчанию
JavaScriptсамый строгий: дополнительно проверяет браузер посетителя. Люди с отключённым JavaScript будут считаться ботами

С уровня Высокий фильтр дополнительно сверяет IP с базой репутации, ищет типичные и серверные признаки автоматизации и проверяет заголовки запроса: пустой Accept и подозрительные заголовки.

Переключатель «Уровень фильтра»
Переключатель «Уровень фильтра»

Как выбрать уровень

Чем строже уровень, тем больше ботов он отсеивает и тем выше риск принять за бота живого человека. Начните с Высокого. Если в статистике много ботов, попробуйте JavaScript. Если жалуются, что реальные посетители не доходят, выберите Стандарт.

Меняйте уровень на одну ступень и сравнивайте статистику за одинаковые периоды до и после. Изменения действуют сразу, результат видно в журнале кликов, в сегментах Люди и Боты. Разным источникам трафика удобно делать разные шаблоны или кампании.

Уровень JavaScript

Проверка в браузере работает только со способами Meta Refresh, JavaScript, Image And Redirect и с лендингом. С остальными способами уровень работает как Высокий.

Уровень «Выкл»

Если уровень Выкл или действие для ботов Не проверять на ботов, фильтр не проверяет переходы. Поисковые роботы, превью мессенджеров и другой автоматический трафик идут по потокам и на адрес назначения вместе с людьми. Списки ботов и разрешённый реферер не действуют, страницы проверки и карантин не включаются. Ботом станет только переход, который поток отправил в Считать ботом.

Действие для ботов

В шаблоне действие выбирается в поле Действие для ботов. По умолчанию это отправка на URL для ботов.

ДействиеЧто получит бот
Отправить на URL для ботовпереход на ваш адрес для ботов. Если адрес пустой, бот уходит на случайный популярный сайт
Показать лендингваш лендинг. Если лендинг не выбран, ответ 404
Ничего не показывать (код 205)пустой ответ с кодом 205
404, 403, 500пустой ответ с этим кодом
Оставить на странице, не уводитьостаётся на странице проверки
Только отмечать, вести как людейсм. ниже
Не проверять на ботовто же, что уровень Выкл

Только отмечать

Проверка идёт, и клик получает пометку бота, но адрес не меняется: бот идёт по потокам и на адрес назначения, как человек. Страница бота, капча и карантин не включаются. Режим подходит, когда нужно сначала посмотреть, сколько ботов в трафике, и ничего не отсекать.

Исключение одно: поток с назначением Считать ботом и в этом режиме уводит клик на адрес для ботов.

Бот в кампании

В кампании режима «Трекер» действие для ботов выбирается в поле Боты. Уровень по умолчанию Высокий.

ВыборЧто происходит
Отмечатьто же, что Только отмечать. Значение по умолчанию
Уводитьбот уходит на адрес, который задаёт кнопка Изменить
Не проверятьпроверки выключены, каждый клик считается человеком

Карантин

Поле Карантин после первого бота, минут (от 0 до 60) включает карантин: после первого настоящего бота весь трафик ссылки на указанное число минут получает страницу бота. 0 отключает карантин. Он включается один раз на ссылку.

В окно карантина страницу бота увидят и живые посетители. Включайте карантин до запуска креативов: на ссылке с трафиком первый случайный бот отнимет у вас продажи на всё это время.

Карантин не работает при действиях Только отмечать и Не проверять на ботов.

Первые клики

Поле Первые клики считать ботами (от 0 до 1000) помечает ботами первые N кликов ссылки.

Списки ботов

Свои IP-адреса и User-Agent можно собрать в список и подключить. Это делается в Дополнительные настройки ботов, там же Источники обнаружения ботов. Посетителей из чёрного списка фильтр считает ботами, из белого пропускает без проверки. Списки общие для аккаунта: один список можно подключить к любому шаблону или кампании.

Кнопка Создать список ботов открывает форму. В списке IP можно указывать адрес, подсеть CIDR или диапазон, до 10 000 записей. В списке User-Agent до 100 записей.

Порядок проверки: сначала белый список, затем чёрный, затем разрешённый реферер.

Белые и чёрные списки ботов
Белые и чёрные списки ботов

Источники обнаружения

В Источники обнаружения ботов можно включать и выключать отдельные признаки: неизвестная платформа, неизвестный браузер, пустая страна, пустой город, IPv6, дата-центры, VPN, пустой реферер.

Разрешённый реферер

Поле Разрешённый реферер лежит в Дополнительные настройки → Безопасность и интеграции.

Если указать домены, все остальные переходы, без реферера или с других сайтов, будут считаться ботами. Реферера нет у многих переходов из приложений и прямых заходов.

Поле подходит, когда трафик приходит только с известных сайтов. Несколько доменов указывают через запятую, поддомены указанных доменов тоже разрешены.

На этой странице