Исследование: Просьба к ИИ стать «экспертом» в вопросе ухудшает его работу
Базовая модель показала точность 71,6%, а «экспертная» — 68%.
Запросы к искусственному интеллекту с просьбой примерить на себя образ профессионала могут снижать качество генерируемого контента. К такому выводу пришли учёные Университета Южной Калифорнии в новом исследовании.
Оказалось, что назначение нейросети определённой роли даёт смешанные результаты. Для задач в области математики или программирования этот метод оказался вредным. Всё потому, что нейросеть переключается в режим следования инструкциям и забывает об извлечении фактов из базы. В тестах базовая модель показала точность 71,6%, а «экспертная» — 68%.
По словам соавтора исследования Цзычжао Ху, общие фразы вроде «ты опытный разработчик» не эффективны. Лучше чётко описывать конкретные требования к архитектуре проекта.
Главный совет учёных: для фактов задавайте прямые вопросы, а для правил — пишите подробные инструкции.
Статья подготовлена редакцией рекламной экосистемы Vitamin.tools, возвращающей до 18% с пополнений рекламных бюджетов.