ИИ для исследований: как отделить факты от вымысла

ИИ для исследований: как отделить факты от вымысла

Работа с ИИ для исследований напоминает общение с талантливым, но порой ненадёжным подростком. Блестящие идеи соседствуют с откровенным вымыслом, и важно уметь отличать одно от другого. Просто запросить информацию недостаточно – нужно уметь проверять и направлять ИИ.

Источники и ссылки: перепроверяем всё

Запрашивайте источники по каждому утверждению ИИ. Даже если чат-бот ссылается на авторитетные журналы, убедитесь, что эти статьи действительно существуют. Мой опыт показывает, что ИИ может сфабриковать источник, придав ему правдоподобное название и имя автора.

Промпт: Предоставь список источников для утверждения [ваше утверждение]. Укажи ссылки на оригинальные статьи или исследования.

"Покажи свою работу": заглядываем под капот

Просите ИИ "показать свою работу", раскрывая логику получения ответа. Если бот утверждает, что проанализировал отзывы из Google, уточните, какие именно данные были использованы. Так вы сможете выявить несоответствия и понять, насколько достоверна представленная информация.

Промпт: Ты упомянул анализ отзывов. Покажи, как ты проводил этот анализ, и какие именно данные использовал. Меня интересуют конкретные отзывы и критерии оценки.

Или, если ИИ ссылается на статистику:

Промпт: Разъясни, как ты получил эти цифры, и предоставь источники данных.

Кросс-валидация: тестируем логику

Задавайте связанные вопросы, постепенно углубляясь в тему. Это поможет оценить, насколько последователен ИИ в своих ответах и не теряет ли он нить рассуждений. Например, начав с вопроса о материалах для автомобильных шин, можно перейти к типам резины, а затем к применению резины в других деталях автомобиля.

Промпт: Если автомобильные шины изготавливаются из резины, то какой тип резины используется? А используется ли натуральный каучук?

Постепенно углубляйтесь, задавая связанные вопросы.

Актуальность данных: держим руку на пульсе

Учитывайте, что базы знаний чат-ботов ограничены по времени. Проверяйте актуальность информации, задавая вопросы о недавних событиях. Если ИИ не владеет информацией о событиях после даты отсечки, попробуйте направить его на поиск в интернете.

Промпт: Сколько угля добыто в РФ в январе – августе 2024 года?

Итеративное уточнение: диалог с ИИ

Формулируйте запросы поэтапно, уточняя и дополняя их в процессе взаимодействия с ИИ. Начните с общего вопроса, а затем сужайте область поиска, добавляя детали и уточнения.

Промпт: Расскажи про облачные сервисы

Затем уточните:

Промпт: Какие существуют типы облачных сервисов SaaS?

И далее:

Промпт: Сравни три самых популярных сервиса в каждой категории SaaS, представив их сильные и слабые стороны в таблице.

Каждый последующий запрос уточняет предыдущий, помогая получить более точный и структурированный ответ.

Также будет хорошим вариантом проверить ответы на интересующие вопросы у нескольких разных моделей. Спросить у ChatGPT, потом у какого-нибудь Claude или Gemini. А если ответы этих ИИ не устраивают, всегда можно посмотреть в ленте Нейро Примуса какие ещё новинки больших языковых моделей появились за последнее время.

Какие LLM вы используете чаще:
ChatGPT
Gemini
Claude
Grok
Llama
Другие
1 комментарий

По поводу уточнения и проверки — после нескольких случаев я потеряла интерес к генеративному ИИ.
Примеры ниже. Извините за ссылки, лень писать. Можете удалить.
https://vc.ru/u/206524-o-chaikina/1507616-neiroset-mozhet-stat-horoshim-sobesednikom-nichego-esli-dnem-ranshe-ona-otberet-u-vas-rabotu
https://vc.ru/u/206524-o-chaikina/998990-kratkii-dialog-s-neirosetyu-ob-avtorstve