Metrics and groups/ru

Подробнее об интерфейсе статистики — в коротком видео: https://www.loom.com/share/63f58c8e3165465bae90ab61471addc6

User agent

User agent — это заголовок, который браузер, программа или приложение передают серверу при любом заходе на сайт. В user agent содержится как правило название браузера, его версия, движок на основе которого сделан браузер, операционная система и её версия. Так же user agent может содержать название и модель мобильного устройства, на котором он запущен и некоторую другую информацию. То есть это визитная карточка браузера.

User agent

User agent is a header that a browser, program, or application sends to a server when accessing a website. The user agent typically contains the browser name, its version, the engine on which the browser is based, the operating system and its version. The user agent can also contain the name and model of the mobile device on which it is running and some other information. In other words, it is a browser's business card.

Проблема в том, что эту визитную карточку очень легко подделать — с помощью расширений или даже просто в DevTools. Практически в любом языке программирования есть возможность при обращении к серверу передать в user agent любую информацию. Поэтому к user agent надо относиться с осторожностью.

В норме браузер не врёт о себе. Есть разумеется исключения, вроде тех же расширений, которые помогают изменить user agent, или мобильных браузеров или приложений, в которых зашит неизменный user agent, потому что разработчики ленятся его менять. Но такие случаи можно игнорировать — они либо единичны, либо их можно добавить в исключения.

Другое дело, когда переданная информация не соответствует тому, что мы узнали о браузере в результате проверки, и этот паттерн превалирует на срезе — по user agent мы видим разнообразие браузеров, а анализ показывает, что это всё заходы с одного и того же браузера.

Поэтому user agent является «ненадёжным расказчиком» и к информации, которую мы добываем из него надо относиться со здоровой долей скептицизма.

Метрики

Метрики — это параметры, которые позволяют ответить на вопрос «сколько?». Сколько было заходов на сайт? Сколько из них было совершено ботами, а сколько живыми пользователями?

Общие метрики

Название	Название	Описание
Hits	Переходы	Общее количество проверок
Unique users	Уники	Количество уникальных пользователей, подсчитанное на основе IP, user agent и client hints.
Good	Хорошие переходы	Количество проверок, по результату которых переход оказался не ботовым, не подозрительным и не тех. потерей.
Tech. losses	Тех. потери	Количество переходов, которые мы не смогли проверить. Причины — браузеры с отключённым JS, устаревшие браузеры и пр.

Недействительные переходы (IVT)

Недействительный трафик состоит из ботового и мошеннического трафика.

Бот — это программа или автоматизированный скрипт, который запрашивает веб-контент (включая цифровую рекламу) без участия пользователя. Это может быть например браузер на заражённом компьютере, являющимся частью ботнета. Или написанный программистом скрипт, который обходит сайты с какой-то целью.

Мошеннический трафик — трафик, который генерят живые люди, которые путём обмана запрашивают веб-контент (включая цифровую рекламу) сами того не зная.

Название	Название	Описание
BV total	Всего IVT	Количество переходов, совершённых ботами или спровоцированных мошенниками.
Crawler	Crawler	Легитимные боты, которые честно заявляют о своей ботовости через user agent. Это могут быть боты поисковых систем, индексирующие веб; боты соц. сетей и пр. Не смотря на то, что они не имеют злых намерений, они не могут совершить конверсию и не являются целевой аудиторий, поэтому должны быть проигнорированы.
Spoofing	Подмена UA	Боты, чей user agent не соответствует реальной версии браузера и / или операционной системы.
Automated	Автоматизация	Боты, использующие headless-браузеры или инструменты автоматизации вроде Selenium. Изначальная цель таких решений — автоматизированное тестирование программного обеспечения, сайтов, приложений и пр. Потом ботоводы поняли, что их так же можно использовать для скликивания ссылок, накручивания просмотров и т. д. и взяли в свой инвентарь.
Incorrect requests	Плохие запросы	При анализе мы увидели, что показ пришёл из невидимого элемента. Например, пользователь кликнул на какой-то ссылке, но этот клик попал в невидимый iframe, который был расположен поверх ссылки. То есть показ засчитается, но реальный пользователь не видел рекламы и не знал куда он кликает. Или мы увидели показ был инициирован не пользователем, а скриптом помимо воли пользователя.
Bad reputation IP	Ботовые IP	IP, с которых приходят только тех. потери. Например, кто-то поднял в датацентре сервер, и с помощью CURL, или другой тулзы для http-запросов (а они есть во всех языках программирования) парсит страницы, а потом прокликивает рекламные ссылки с помощью того же CURL.
Blocked hits	Заблокированные переходы	Переходы, которые были заблокированы с соответствии с настройками интеграции.

Подозрительные переходы (SV, suspicious visits)

Мы видим в результатах анализа что-то подозрительное, но этого не хватает, чтобы со всей уверенностью утверждать, что перед нами бот. Возможные причины — у пользователя установлено безобидное расширение, которое как-то влияет на проверки, или пользователь заходит через VPN.

Подозрительные переходы требуют индивидуального подхода: по конверсиям можно решить, куда отнести такой трафик — к фроду или к хорошему.

SV is shown as five concrete reasons. The previous categories Suspicion of spoofing, Suspicion of automated and Suspicion of fraud are no longer shown. Proxy stays.

Название	Название	Описание
SV total	SV total	Количество подозрительных переходов.
Proxy	Прокси	Пользователи, заходящие с VPN, proxy или Tor. Это живые клики, но они идут с нецелевых гео. Если вы закупаете трафик с конкретного гео, а на нём много прокси, значит трафик плохой.
Maybe automated	Возможно автоматизированные	Подозрение, что в браузере используются инструменты автоматизации или техники подмены user agent.
Timezone mismatch	Несовпадение часовых поясов	Часовой пояс, определённый по IP-адресу, не совпадает с часовым поясом, который сообщает браузер.
Language mismatch	Несовпадение языков	Язык браузера не совпадает с заголовком Accept-Language.
Screen problems	Проблемы с экраном	Параметры разрешения экрана несогласованны.

Viewability

Viewability — это оценка качества показа рекламного креатива (баннера, нативки или видео): был ли он реально отрисован и увиден пользователем, сколько времени находился в видимой зоне, как пользователь смотрел видео. Технически Viewability работает внутри того же скрипта, что и антифрод: сначала пользователь проверяется на фрод, затем фиксируется факт и качество показа креатива. Ниже — описание всех метрик Viewability, разбитых на три группы: качество показа (Viewability), вовлечённость (Attention) и глубина просмотра (Video consumption). Большинство метрик считаются на каждый показ (per impression); доли (rate) рассчитываются агрегированно и показываются в процентах (0–100%).

Viewability — качество показа

Метрики этой группы фиксируют, был ли креатив отрисован в браузере и соответствовал ли показ стандарту видимости MRC.

Название	Название	Описание
Rendered impression	Отрисованный показ	Факт рендера креатива в DOM (для баннера и нативки) или загрузки видео-плеера (для видео). Базовый показатель: креатив реально дошёл до браузера пользователя.
Viewable impression	Видимый показ	Факт видимого показа по стандарту MRC: не менее 50% пикселей креатива находились в видимой зоне в течение не менее 1 секунды для баннера и не менее 2 секунд для видео.
Viewable rate	Доля видимых показов	Доля видимых показов: Viewable impressions / Rendered impressions, в процентах (0–100%).
% In view	% в зоне видимости	Доля видимых пикселей креатива, средневзвешенная по времени за сессию показа, в процентах (0–100%).

Attention

Метрики вовлечённости измеряют, сколько времени креатив или страница находились в фокусе пользователя.

Название	Название	Описание
Viewable time	Время в видимости	Время, в течение которого креатив находился в видимом (viewable) состоянии, в секундах.
Dwell time	Время на странице	Общее время на странице от её открытия до закрытия, включая время, когда вкладка была неактивна, в секундах.
In focus time	Время в фокусе	Время, когда вкладка была активной. Если пользователь переключился на другую вкладку или приложение — счётчик останавливается. В секундах.

Video consumption

Метрики глубины просмотра применимы к видео-креативам и показывают, насколько полно пользователь досмотрел ролик.

Название	Название	Описание
Video start	Старт видео	Факт начала воспроизведения видео.
Video 25%	Видео 25%	Факт прохождения 25% длительности видео.
Video 50%	Видео 50%	Факт прохождения 50% длительности видео.
Video 75%	Видео 75%	Факт прохождения 75% длительности видео.
Video 100%	Видео 100%	Факт досмотра видео до конца (Video Completion).
Video completion rate	Доля досмотров	Доля досмотров до конца: Completions / Video starts, в процентах (0–100%).
Time in view	Время в видимости	Время воспроизведения видео в видимом (viewable) состоянии, в секундах.
Muted	Без звука	Статус звука на старте воспроизведения: со звуком или без звука (muted).
Autoplay	Автовоспроизведение	Тип запуска воспроизведения: автозапуск (autoplay) или запуск пользователем.
Video audible time	Время со звуком	Общее количество секунд, в течение которых видео воспроизводилось со звуком и громкостью выше 0.

Особенности (Feature)

Некоторые особенности браузеров, детектируемые нами.

Название	Название	Описание
AdBlock	AdBlock	Установлен в браузере пользователя AdBlock или нет. Обратите внимание — мы проверяем только наличие AdBlock, включён он или выключен не проверяется.
Is mobile	Мобильное устройство	Проверка по характерным признакам (не по user agent) является устройство мобильным (смартфоны, планшеты) или нет (десктоп, телевизоры).
WebView	WebView	Количество визитов с Chrome WebView. Chrome WebView — это сильно урезанная по функционалу разновидность мобильного Chrome, которая используется в прилах для просмотра веб-страниц, а так же многие мобильные браузеры для Андроида — это кастомизированные WebView. Большая часть WebView не умеют показывать пуши. Поэтому если на push-трафике большой процент WebView значит, возможно, трафик плохой.
IFrame	IFrame	Количество визитов осуществлённых через iframe. Тег <iframe> — это HTML-элемент, позволяющий встраивать в страницу отдельный, законченный HTML-документ, то есть другую веб-страницу.
Push notifications	Пуши	Количество визитов с браузеров, поддерживающих пуши.
Hidden Page	Скрытая страница	Показывает открылась ли рекламная страница в скрытой вкладке (popunder) — True; в активной — False. Действия за пределами браузера (например, выбор приложений на смартфоне) не фиксируются как скрытая страница. Метрика отслеживает только состояние вкладок в браузере.

Поведенческий анализ

Метрики, основанные на анализе поведения пользователя на странице.

Название	Описание
Видимость страницы	Количество визитов, во время которых страница получала фокус, то есть была открыта не в фоне, а в активной вкладке браузера.
Активность на странице	Количество визитов, во время которых была хотя бы минимальная активность на странице. Под активностью понимаются клики, тачи, скроллы, движения мышкой.
Принятие страницы	Количество визитов, во время которых время от открытия страницы до её закрытия превышало 15 секунд.

Группировки

Группировки — это параметры, которые позволяют ответить на вопрос «какие?». Из каких стран были переходы? Какие браузеры использовали пользователи?

Время

Название	Название	Описание
Hour	Час	Группирует статистику по часам.
Day	День	Группирует статистику по дням.
Week	Неделя	Группирует статистику по неделям.
Month	Месяц	Группирует статистику по месяцам. Максимальный период, который можно выбрать — два месяца.

Метки

Название	Название	Описание
Integration	Интеграция	Интеграция в Kaminari.
Bot type	Тип бота	Группировка по типам ботов.
Referer	Реферер	URL страницы, с которой пользователь попал на страницу.
Sub1..Sub7	Sub1..Sub7	Метки, установленные клиентом.

Гео

Название	Название	Описание
Language	Язык	Предпочитаемый язык пользователя, то есть язык UI, установленный в настройках браузера.
Timezone	Часовой пояс	Данные о часовом поясе пользователя, полученные из IP.
Country	Страна	Данные о стране, полученные из IP.
City	Город	Данные о городе, полученные из IP.
Provider	Интернет-провайдер	Данные об интернет-провайдере, полученные из IP.
IP	IP	IP без последнего октета, то есть в конце всегда будут нули, например: 192.168.1.00.

Девайс

Название	Название	Описание
Real browser engine	Настоящий движок браузера	Все современные браузеры делаются на базе трёх опенсорсных движков: Blink (Хром, Хромиум, Яндекс-браузер, Самсунг-браузер, современные Опера и MS Edge, большинство браузеров для Андроида); WebKit (Safari; версии Хрома, Яндекс-браузера, Firefox и пр. для iOS; браузеры в PlayStation); Gecko (Firefox). Также есть 3 старых неподдерживаемых движка, которые до сих пор встречаются в сети в виде Internet Explorer, в MS Edge до 18 версии и в Опере до 12 версии. Мы умеем определять по характерным признакам все 6 движков, а также умеем определять конкретную версию движка. В «Движок браузера» мы и пишем эти данные.
Real OS	Настоящая ОС	Настоящая ОС, без версии.
Browser from UA	Браузер из UA	Название браузера и его версия, взятые из user agent.
OS from UA	ОС из UA	Операционная система и её версия, взятые из user agent.
Device from UA	Устройство из UA	Производитель мобильного устройства, полученный из user agent.
Device type from UA	Тип устройства из UA	Тип устройства (десктоп, смартфон, умный телевизор и пр.), полученный из user agent.
Android app	Android-приложение	Название Android-приложения, из которого пришёл клик.
Connection type	Тип соединения	Тип соединения, которое устройство использует для связи с сетью (Bluetooth, Wi-Fi, мобильный интернет).

Screen

Название	Название	Описание
Screen width	Ширина экрана	Ширина экрана в пикселях.
Screen height	Высота экрана	Высота экрана в пикселях.
Screen orientation	Ориентация экрана	Ориентация экрана актуальна для мобильных устройств — портретная, перевёрнутая, повёрнутая влево, повёрнутая вправо.
Pixel density	Плотность пикселей	Сколько пикселей экрана будет использовано для отрисовки одного CSS-пикселя, то есть фактически это разрешение экрана.