В корзине пусто!
Два трекера ИИ-поиска дали одному бренду 41% и 23% видимости

- Майк Кинг из iPullRank пишет, что в ИИ-поиске нет единого «правильного» значения видимости, с которым можно было бы сверить трекер.
- Ответы моделей случайны, поэтому один запуск промпта ничего не гарантирует, а надёжность даёт только число повторов.
- Два трекера могут показать 41% и 23% для одного бренда, и оба будут по-своему «правы».
Ситуация, которую описывает Майк Кинг в iPullRank, знакома каждому, кто покупал такие инструменты. У клиента работают две платформы видимости в ИИ. Одна говорит, что бренд появляется в 41% важных промптов, вторая — в 23%. Кому-то из маркетинга нужно вписать цифру в презентацию для совета директоров, и вопрос, какая из них верная, звучит каждую неделю.
Почему «точности» здесь не существует
У классического трекинга позиций есть эталон: страница стоит на четвёртом месте или нет. У ответов ИИ эталона нет. Модель отвечает случайным образом, с поправкой на контекст пользователя, параметры модели и момент обращения к поиску. Кинг предлагает смотреть на это как на опрос общественного мнения: никто не спрашивает, «точен» ли опрос, спрашивают, стабильна ли методика.
Цифры, которые он приводит, хорошо это иллюстрируют. По исследованию Майка Сондерса, из ста запусков ChatGPT лишь около 11% брендов появлялись в 80% и более ответов на промпт. Раньше другое исследование показало, что 72% упомянутых брендов встречались менее чем в одном ответе из пяти. Semrush нашла всего 25% совпадений доменов между режимами Instant и Thinking в ChatGPT.
Решения в методике, которые ломают сравнение
Расхождение между двумя инструментами часто объясняется не ошибкой, а разным выбором, который сделали их авторы.
| Решение | Что измеряется |
|---|---|
| API или скрейпинг | Поведение модели в контролируемых условиях против того, что видит пользователь в интерфейсе |
| Без входа или со входом | Чистый базовый уровень против персонализации, которую может загрязнить история аккаунта |
| Один запуск или много | Ненадёжное да/нет против доли с рассчитанной погрешностью |
Иначе говоря, два трекера — это два разных прибора, которые измеряют разные распределения. Сравнивать их числа между собой так же бессмысленно, как складывать температуру по Цельсию и Фаренгейту. Похожую картину мы разбирали в тексте о метриках ИИ-поиска, которые стоит отслеживать: без общих правил подсчёта числа перестают быть метрикой.
Что спросить у поставщика и что делать со своим трекингом
Кинг советует на демо спрашивать о способе сбора, состоянии аккаунта, выборе модели, географии запросов и о том, что именно считается «упоминанием». Просить журнал изменений методики и сырые ответы. Если измеряете сами, зафиксируйте конфигурацию, делайте достаточно повторов, чтобы увидеть реальный бизнес-эффект, и сопоставляйте видимость с рефералами, конверсиями и логами. Сменили методику посреди года — тренд сломан, и сравнивать с прошлым кварталом уже нельзя.
Для нашего рынка тут есть ещё одно осложнение, которого в оригинале нет. Большинство трекеров собирает ответы с англоязычных или американских IP, тогда как ваши клиенты спрашивают по-украински и нередко с мобильного. Поэтому перед тем, как вносить цифру видимости в отчёт, выясните, на каком языке и из какой страны она собрана. О том, как измерять это на практике, мы писали в гайде по видимости в ИИ-поиске.
Надеюсь, что в следующий раз, когда кто-то покажет «41%», его спросят ещё и про доверительный интервал. Ставлю на то, что большинство поставщиков на этот вопрос сразу достанут слайд с чем-нибудь другим.


