журнал Метрики

Доля голоса в ответах нейросетей: как она считается

Видимость, доля голоса, позиция и цитируемость отвечают на разные вопросы к одним и тем же ответам моделей. Разбираем формулы, показываем, где цифра обманывает, и сколько ответов нужно, чтобы ей верить.

20 августа 20266 мин чтения

Плакат: круговая диаграмма с одним отделённым сектором

Первый отчёт по видимости в нейросетях обычно вызывает один и тот же вопрос: почему цифр четыре, они разные, и какой из них верить. Ответ - всем четырём, потому что они отвечают на разные вопросы к одному и тому же массиву ответов моделей.

0,4вес видимости 0,3вес доли голоса 0,2вес цитирований 0,1вес позиции

Видимость: в скольких ответах вас назвали

Самая прямая метрика. Берём все ответы моделей за неделю по согласованному списку вопросов и считаем, в какой их доле бренд упомянут. Отдельно по каждой модели, сводная цифра - невзвешенное среднее по моделям, чтобы одна разговорчивая модель не перетягивала общую картину.

Две оговорки, без которых видимость превращается в самообман. Первая: упоминание проверяется по смыслу, а не по совпадению строки, и рассказ про чужую компанию с похожим названием не засчитывается. Вторая: вопросы, где название бренда стоит прямо в тексте вопроса, в видимость не входят вообще - модель повторит название в любом случае, и метрика раздуется на пустом месте.

Доля голоса: сколько места вы заняли среди названных

Доля голоса отвечает на другой вопрос: из всех упоминаний брендов в ответах какая часть досталась вам. Знаменатель здесь - не ответы, а упоминания, включая упоминания конкурентов.

Отсюда типичная пара цифр: видимость 40%, доля голоса 25%. Противоречия нет. Вас называют в четырёх ответах из десяти, но в каждом таком ответе модель перечисляет ещё троих, и внимание делится. Видимость показывает, попали ли вы в разговор. Доля голоса - насколько громко там звучите.

Обратная ситуация тоже встречается: видимость невысокая, а доля голоса приличная. Это значит, что модель вспоминает вас редко, но когда вспоминает - почти без конкурентов рядом. Такой профиль обычно у узких ниш.

МетрикаНа какой вопрос отвечаетГде обманывает
ВидимостьНазвали ли нас вообщеРастёт от вопросов с названием бренда внутри
Доля голосаСколько внимания досталось намПадает, когда модель выдаёт длинные списки
ПозицияКаким по счёту нас называютСчитается только там, где бренд есть
ЦитируемостьНа чьи домены модель ссылаетсяЗависит от того, приводит ли модель ссылки
Четыре метрики - четыре разных знаменателя

Позиция и цитируемость

Позиция - средний ранг бренда среди упомянутых, и считается она только по тем ответам, где бренд вообще есть. Иначе метрика превратилась бы в дубль видимости.

Цитируемость смотрит не на названия, а на ссылки: какую долю среди всех источников, которые модели приводят в ответах, занимают ваши домены. Это самая операционная из четырёх цифр, потому что прямо показывает площадки, откуда модель берёт материал по вашей теме. Список чужих доменов из этой метрики - готовый план, где вас быть должно.

Сводная оценка

Четыре метрики сворачиваются в одну: 0,4 умножить на видимость плюс 0,3 на долю голоса плюс 0,2 на цитируемость плюс 0,1 на позицию. Ранг переводится в баллы просто - сто делить на средний ранг: первое место даёт 100, второе 50, третье около 33.

Итог попадает на шкалу от F до A: ниже 40 - F, 40-54 - D, 55-69 - C, 70-84 - B, от 85 - A.

Веса зафиксированы на весь период трекинга и не пересматриваются задним числом. Это принципиально: как только формула меняется, недели перестают быть сравнимыми, а весь смысл еженедельных оценок в сравнении недель.

Сколько ответов нужно, чтобы цифре верить

Базовая гранула - неделя. Дневные колебания не показываем: они шумовые, и реагировать на них означает гоняться за случайностью.

Срез, в котором за период меньше десяти ответов, помечается как предварительный. Цифру показываем сразу, но на такой выборке проценты скачут примерно на пятнадцать пунктов сами по себе, поэтому читать её стоит как направление. На графиках рядом с недельными точками идёт скользящее среднее за четыре недели - именно оно показывает тренд, когда отдельные недели прыгают.

И честная оговорка про метод: оценки идут через официальные API моделей, а версия модели и поведение веб-поиска в API и в пользовательском интерфейсе могут различаться. Поэтому ставка на динамику долей, а не на точечные абсолютные значения.

Где эти цифры видны

Все четыре метрики и сводная оценка лежат в кабинете на одном экране: доли за неделю, изменение к прошлым неделям, скользящее среднее за четыре недели и таблица конкурентов рядом. Любую цифру можно раскрыть до сырых ответов, из которых она посчитана, - вплоть до текста конкретной модели за конкретную дату.

Экран целиком показан в демо-кабинете: без регистрации, на данных демо-бренда. Свои цифры даёт бесплатный первый замер, объёмы и частота - на странице тарифов.

вопросы

Частые вопросы

  • 01Чем доля голоса отличается от видимости?

    Видимость - доля ответов, где бренд назван вообще. Доля голоса - какую часть всех названных брендов занимает ваш. Можно попадать в половину ответов и занимать в них четверть внимания, если рядом каждый раз перечисляют ещё троих.

  • 02Почему видимость 40%, а доля голоса 25%?

    Это разные знаменатели. У видимости знаменатель - все ответы за период, у доли голоса - все упоминания брендов в этих ответах. Чем длиннее списки, которые выдаёт модель, тем сильнее расходятся две цифры.

  • 03Как считается позиция бренда?

    Это средний ранг бренда среди названных, и только по тем ответам, где бренд есть. В сводной оценке ранг переводится в баллы: первое место - 100, второе - 50, третье - примерно 33.

  • 04Сколько ответов нужно, чтобы цифре можно было верить?

    Срез меньше десяти ответов на модель за период мы помечаем как предварительный. На такой выборке проценты скачут примерно на пятнадцать пунктов от одного прогона к другому, поэтому цифру читают как направление, а не как точное значение.

  • 05Почему оценки идут через API, а не через веб-интерфейс?

    API даёт воспроизводимость: одинаковые условия каждую неделю. Версия модели и поведение веб-поиска в API и в пользовательском интерфейсе могут различаться - это известная особенность отрасли, поэтому ставка делается на динамику долей, а не на точечные абсолютные цифры.

проверить свой бренд

Узнайте, что нейросети отвечают о вас

Первая оценка по вашему сайту занимает десять секунд: SEENGO соберёт вопросы клиентов и покажет, где бренд виден, а где отвечают конкурентами.

читать дальше