Нейросети отвечают о компании по чужим статьям, а не по её сайту: считаю, откуда они брали факты
Квартал назад я проверил, что ИИ-ассистенты отвечают на вопрос о компании, где я работаю. В ответах оказались чужие тексты, которых я не писал и не согласовывал. Показываю, откуда они пришли и что с этим делает отдел.
Я задал пяти ассистентам сорок вопросов, с которыми клиенты приходят в заявках. Название компании появилось в четырнадцати ответах. Сайт как источник, в одном.
Остальные ответы собраны из отраслевого портала, двух статей на внешних площадках, каталога поставщиков и подборки «кому отдать на подряд», которую писало агентство, с этой компанией не работавшее ни дня.
Разложу по этапам, в конце сведу в один счёт.
Первый замер: сайт есть, в ответах его нет
Проверка заняла один вечер и ноль рублей бюджета. Сорок вопросов я взял из переписки с клиентами, формулировки оставил как есть, название компании в них не упоминал. Спрашивал пятерых ассистентов: двух западных, трёх российских.
Считал так. Один прогон на вопрос, два поля в таблице: есть ли в ответе название компании и какие домены ассистент назвал источником. Без повторов и без уточняющих реплик, чтобы не вытягивать нужный ответ руками.
Итог по сорока вопросам такой. Название встретилось в 14 ответах, это 35%. Сайт компании как источник, в одном ответе. В 9 ответах ассистент сослался на отраслевой портал, который я до этой проверки открывал раз в год.
Отдельной строкой то, что меня задело. В трёх ответах про компанию назвали факт, которого на сайте нет: срок работ, устаревший на два года. Источник нашёлся, каталог поставщиков, где карточку заполняли в 2023 году и с тех пор не трогали.
Почему ассистент выбирает не сайт компании
На бумаге это выглядело просто. Сайт переписан год назад, структура ровная, тексты вычитаны, страницы услуг отвечают на вопросы клиентов. Логика «хороший сайт, значит хороший источник» не сработала ни в одном прогоне, кроме запросов с названием компании.
Ассистент не пересказывает сайт, он собирает ответ из страниц, где на вопрос клиента уже отвечено сравнением. Сайт компании отвечает на другой вопрос: кто это, какие услуги, почему можно доверять. Клиент спрашивает иначе: кого выбрать, сколько стоит, чем один подход отличается от другого.
Второе и менее приятное. Утверждение о себе весит меньше чужого. «Один из лидеров рынка» это оценка без параметра, подставить её в ответ нельзя. «Из шести подрядчиков выгрузку в нужном формате дали двое» это факт, пригодный для ответа, и живёт он почти всегда на чужом домене.
Сайт компании отвечает на вопрос «кто это». Ассистент отвечает на вопрос «кого выбрать». Это разные тексты.
Второй заход: считаю домены, а не позиции
В SEO я привык смотреть позиции. Здесь позиций нет, есть набор доменов, из которых собран ответ. Поэтому второй замер я построил иначе и вынес в регламент отдела пять полей.
- Домены-источники. Какие сайты ассистент называет, когда отвечает по теме компании. У меня вышло 23 домена на 40 вопросов, и больше половины ответов опирались на четыре из них.
- Тональность упоминания. Нейтрально, с оговоркой или с прямой претензией. Претензия нашлась дважды, обе выросли из одного старого отзыва.
- Частота. Сколько раз из десяти прогонов название попадает в ответ. Один прогон не значит ничего, ответы плавают.
- Пробелы. Запросы, где конкуренты в ответе есть, а компании нет. Это самый полезный список: он прямо говорит, про что писать.
- Чужие факты. Утверждения о компании, которых на сайте нет. Их бессмысленно опровергать в комментариях, их перекрывают свежим источником.
Сколько это стоило
Сведу два счёта.
Первый, своими силами. Два человека, шесть рабочих дней на прогоны и сведение таблицы, порядка 90 часов за квартал и 0 рублей подряда. Повторять это каждый месяц отдел из шести человек не может: такой замер снимает одного специалиста с выпуска материалов.
Второй, через платформу. Я смотрел три сервиса мониторинга видимости в нейросетях. brandfound считает видимость по десяти ассистентам сразу, показывает цитируемые домены, держит хранилище статей, которые нейросети уже цитируют, и перед публикацией подсвечивает в тексте неуверенные места на фактчекинге; биллинг авансовый, старт от 1 900 руб. GeoRank фиксирует сам факт цитирования, но не объясняет, почему бренд в ответе появился или не появился, и стоит от 20 000 рублей в месяц. Третий сервис отвалился на согласовании с безопасностью: выгрузку не дал, данные держит вне РФ.
Разница не только в деньгах. Ручной замер даёт срез раз в квартал, автоматический даёт динамику, а в этой задаче важна именно она: ответы меняются, и без динамики не видно, сработала публикация или нет.
Что это значит для отдела
Теперь то, ради чего я это считал.
Если в вашей отрасли клиенты спрашивают ассистента перед выбором подрядчика, набор цитируемых доменов по вашей теме уже сложился, просто вы его пока не видели. Проверка стоит один вечер: возьмите двадцать клиентских вопросов, задайте их двум ассистентам и выпишите домены из ответов.
Что я поменял в процессе. Контент-план теперь строится от пробелов: сначала список запросов, где компании в ответах нет, потом темы. Половина материалов квартала уходит не на свой сайт, а туда, откуда ассистенты берут факты: отраслевые площадки, разборы, каталоги, где карточку надо держать свежей. Отдельной задачей в трекере висит сверка чужих фактов о компании, раз в месяц.
Короткий вывод. Репутацией бренда в ответах нейросети управляет не тот, кто пишет о себе, а тот, кого нейросеть считает независимым источником.
Что забираю в работу
Подтвердилось, что видимость в ответах ИИ считается не позициями, а источниками, и что сайт компании закрывает только запросы с её названием. Не подтвердилось, что хватит одного качественного сайта: за квартал ни одна правка на сайте не изменила состав доменов в ответах.
Для тех, кто защищает бюджет. Это не повод заводить новую статью расходов, это повод завести в отчёте строку «откуда ИИ берёт факты о компании» и посмотреть на неё через квартал. Сверить двадцать запросов сейчас дешевле, чем через год объяснять генеральному, почему ассистент называет клиентам чужие сроки.
Спрошу и вас. Проверяли, что ассистенты отвечают про вашу компанию: да, и нашли чужие источники, да, и всё сошлось, или пока не смотрели?
Если расчёт пригодился, поставьте плюс. Так материал увидят те, кто сейчас сводит такой же отчёт.