Саньяр Якупов
Внедряю ИИ в малый бизнес и пишу, как это выглядит изнутри: цифры, ошибки, что не сработало. Telegram: @auto_business_sanyar. Сайт: ai-konveier.ru
У меня было ровно так, только в маленьком масштабе: две недели я менял стратегию и пересобирал группы в Директе, а цель в Метрике просто смотрела не туда. Теперь по понедельникам сверяю три числа: заявки в таблице, конверсии в Директе и заходы с рекламы по своему счетчику. Расходятся сильно - сначала чиню подсчет, а рекламу трогаю потом.
Мой замер как раз из первого пункта: один вопрос, один ответ, без продолжения разговора. Пока это не мешает - точка отсчета у меня ноль, и до выбора на третьем шаге еще далеко. Но как вы предлагаете мерить диалог: писать заранее цепочку из трех-четырех уточнений и прогонять ее целиком? Тогда число запросов вырастет в разы. У меня и одиночные вопросы дают 360 запросов и около 540 ₽ в неделю, а с цепочками замер для маленького бизнеса перестает быть дешевым.
Разрыв в 52 пункта я читаю так: маркетолог меряет попадание в ответ, а покупатель смотрит, объяснили ли ему выбор. В своем замере я поэтому делю упоминания на три вида: советует обратиться, сравнивает с другими или просто назвал в перечне. Растущая доля упоминаний легко прячет падение рекомендаций, и по одной цифре этого не увидеть. А в данных Kantar есть доверие по категориям покупок? Подозреваю, что в услугах и в товарах 23% распадается на две очень разные цифры.
Ответы от лица пользователя - самое смелое место в новости. У меня бот готовит посты для канала в моем стиле за минуту, но выходит пост только после того, как я нажму "Согласовать". Рядом еще "Переделать" и "Отменить". В рабочем чате цена ошибки выше, чем в посте: ответил помощник коллеге "да, делаем" - и это уже решение, которое никто не принимал. Интересно, есть ли в Time режим, где помощник только кладет черновик, а отправляет человек.
Уверенная ошибка вылезла у меня там же, где у вас, только на текстах. Агент пишет мне черновики статей, и в 5 из 9 он дописал детали, которых не было в источниках, причем выглядели они правдоподобнее настоящих. Помог список фактов, где у каждого указано, откуда он взят. Про разноску выписки интересно: спорные операции вы в итоге закрепили жестким правилом в инструкции агента или отдаете их человеку сразу, без попытки?
16,3% по категории для небольшого бренда звучит почти мечтой. У меня точка отсчета была ровно ноль: в конце октября прогнал 360 ответов пяти нейросетей по своей нише, меня не назвали ни разу, и сайт ни разу не попал в источники. Вопрос по методике: 9722 ответа - это разные формулировки или одни и те же запросы по несколько прогонов? От этого зависит, с чем через месяц сравнивать: на разных формулировках категория получается шире, а сдвиг одного бренда проседает в шуме.
Пришел к тому же через свой замер, позицию даже не записываю. Каждый понедельник задаю пяти нейросетям 24 вопроса, каждый по три раза, и считаю только долю ответов, где меня назвали. Четыре из 24 - контрольные: по ним я специально ничего не пишу. Вырастет доля на основных, а контрольные стоят - значит, сработали статьи, а не модель стала щедрее на имена. Без такой группы даже доля врет не меньше позиции. Сколько повторов на один запрос вы считаете достаточным? У меня три - потому что так прогон стоит около 540 ₽, а не потому что этого хватает.
Для малого бизнеса я бы начал на шаг раньше всей этой цепочки: проверить, что заявки вообще считаются. У меня счетчик без cookie за 30 дней показал 163 захода с рекламы, а Метрика с 1 по 18 октября - 5 визитов со всех источников. На таких данных любая архитектура маркетинга строится вслепую: не видно, какой канал дал заявку, а какой только показы. А этап сомнения вы у клиентов чем меряете - повторными визитами или как-то еще?
Страшнее всего тут фраза про задачи, которые растягиваются с месяца до года, а цена договора стоит на месте. У меня масштаб совсем другой, но механика похожая: на карточках для маркетплейса мы до конца не доработали ТЗ, и переделки съели больше времени, чем сама работа. Интересно, Мария пробовала делить договор на этапы с отдельной оплатой каждого, или заказчики в проектировании на такое не соглашаются?
Твердых данных, как в Вордстате, тут не будет, с этим не спорю. Я бы такой замер клиенту и не показывал как отчет о результате, это скорее градусник: одни и те же вопросы каждую неделю, и смотришь на сдвиг, а не на саму цифру. Рядом кладу то, что можно проверить: переходы из ИИ-ассистентов в счетчике, брендовые запросы в Вебмастере и ответы "откуда узнали" в заявках. Если три источника сдвинулись в одну сторону - это уже разговор, а не вера на слово.