Группы браузеров и ботов: базовое понятие
Все визиты в KillBot разбиваются на слепки. Чтобы понимать, кто стоит за каждым слепком — реальные пользователи или боты — каждому слепку назначается подпись. Именно подпись определяет, в какую группу относится данный слепок: к браузерам (пользователям) или к ботам:
Такой подход позволяет автоматически распределять визиты по категориям и видеть, к какому типу трафика относится тот или иной слепок: реальный пользователь или бот.
Если слепок остаётся без группы (НЕТ в группах) и при этом попадает в ТОП по трафику, то это всегда бот. Причина проста: все слепки популярных браузеров уже давно добавлены в системные группы. Чтобы слепок не оставался «ничейным», можно создать собственную группу ботов и добавить туда этот слепок. После этого в таблице будет чётко указано, что он принадлежит именно этой группе.
Истинное назначение групп слепков
Когда KillBot разбивает трафик на слепки, то слепки, на которые приходится основная масса визитов находятся в верхней части таблицы на странице слепков.
Но вместе с ними существует и большое количество непопулярных слепков, которые набирают всего 1–10 визитов. Это «хвост» списка слепков — обычно вторая страница таблицы и далее:
Главная особенность этого хвоста заключается в том, что в нём будут и реальные пользователи, и боты, которых нет в системных группах.
Всегда будут визиты с неизвестными слепками от реальных пользователей, так как они могут выходить в интернет с установленными браузерные расширениями, которые окажут влияние на структуру слепка, могут сидеть через антидетект, могут сидеть с не популярного браузера и т.п.
Тогда: как трактовать такой хвост трафика шумных визитов с неизвестными слепками?
-
С крупными неизвестными слепками всё просто: достаточно заглянуть в вебвизор, проверить и, если видно, что это боты — то помещаем их в свою группу ботов.
-
А вот с единичными визитами возникает сложность: вручную просматривать каждый заход затратно по времени, и никто этим не будет заниматься.
В Килботе есть возможность по разному интерпретировать такой шумный хвост из слепков
Здесь важно понимать:
-
если на сайте много ботов, то хвост слепков в основном тоже состоит из ботов, и разумно обрабатывать его как бот-трафик;
-
если же на сайте не так много ботов (например, всего несколько типов, которые уже выделены в отдельные группы), то в хвосте будет преобладать пользовательский трафик, и логично трактовать его как визиты реальных пользователей.
Именно для этого предназначена опция «Визит с неизвестным слепком — это»:
Как пометить этот шумных хвост из слепков как реальные ПОЛЬЗОВАТЕЛИ
По умолчанию шумный хвост из неизвестных слепков размечается как боты. Тут разберем как трактовать этот хвост как пользователи.
-
Сначала нужно создать свою группу ботов.
-
В эту группу ботов мы добавим «жирные» слепки ботов - с первой страницы слепков, которых ещё нет в системных слепках.
Нужно добится чтобы, как минимум, на первой странице слепков чтобы все слепки были бы в группах. После этого основная масса трафика будет распределена по известным слепкам (боты или пользователи). -
В хвосте останутся только единичные, не сгруппированные и не подписанные слепки.
Теперь, когда весь трафик разбит на группы и подписан, нужно выбрать опцию:
-
«Визит с неизвестным слепком = ПОЛЬЗОВАТЕЛЬ» — если на сайте мало ботов.
-
«Визит с неизвестным слепком = БОТ» — (по умолчанию) если ботов много и хвост трафика в основном состоит именно из них.
Т.е. мы трафик разбили на группы (слепки), пометили группы как пользователи и боты, у нас остался хвост - который просто смысла нет проверять точечно - и весь этот хвост мы обрабатываем одинакого.
Важный момент
Если на сайт приходит бот нового типа и начинает генерировать значительный объём визитов, и этого бота нет в системных слепках, а настройка установлена как «Визит с неизвестным слепком = ПОЛЬЗОВАТЕЛЬ», то визиты этого нового бота будут ошибочно считаться пользовательскими.
Поэтому важно периодически проверять, не появился ли на сайте новый массовый бот. В будущем в KillBot будут реализованы специальные сигналы, которые позволят автоматически отслеживать такие ситуации.
Как добавить создать группу ботов и добавить туда слепок?
В левом меню кликаем на "Группы ботов" -> "Создать группу ботов":
Вводим данные:
Тут мы:
1. вводим название группы ботов - именно оно будет отображаться под слепком.
2. И, ВАЖНО:
Нужно обязательно выделить сайт к какому группу ботов применить - это (2) на скрине выше. Если этого не сделать, то группа ботов в на странице слепков для выбора не появится.
3. Наживаем сохранить.
Далее, на странице слепков просто под слепком выбираем группу в какую слепок добавить:
Если не известный слепок принадлежит настоящим пользователям, то по аналогии можно создать группу браузеров и добавить туда слепок.