Исследование: Просьба к ИИ стать «экспертом» в вопросе ухудшает его работу

Базовая модель показала точность 71,6%, а «экспертная» — 68%.

Исследование: Просьба к ИИ стать «экспертом» в вопросе ухудшает его работу

Запросы к искусственному интеллекту с просьбой примерить на себя образ профессионала могут снижать качество генерируемого контента. К такому выводу пришли учёные Университета Южной Калифорнии в новом исследовании.

Оказалось, что назначение нейросети определённой роли даёт смешанные результаты. Для задач в области математики или программирования этот метод оказался вредным. Всё потому, что нейросеть переключается в режим следования инструкциям и забывает об извлечении фактов из базы. В тестах базовая модель показала точность 71,6%, а «экспертная» — 68%.

По словам соавтора исследования Цзычжао Ху, общие фразы вроде «ты опытный разработчик» не эффективны. Лучше чётко описывать конкретные требования к архитектуре проекта.

Главный совет учёных: для фактов задавайте прямые вопросы, а для правил — пишите подробные инструкции.

Статья подготовлена редакцией рекламной экосистемы Vitamin.tools, возвращающей до 18% с пополнений рекламных бюджетов.

77