Chat GPT3 получил бы на экзамене оценку от B до B-
GPT3 , чат-бот с искусственным интеллектом от OpenAPI, стал вирусным вскоре после своего запуска, привлекая внимание и поднимая вопросы о будущем генеративного ИИ. Но достаточно ли он умен, чтобы сдать выпускной экзамен на типичном курсе Wharton MBA?
Содиректор Mack Institute Кристиан Тервиш опубликовал свои выводы в официальном документе, ссылка на который приведена ниже.
Резюме:
Chat GPT3 от OpenAI продемонстрировал замечательную способность автоматизировать некоторые навыки высокооплачиваемых работников умственного труда в целом и в частности работников умственного труда на должностях, занимаемых выпускниками MBA, включая аналитиков, менеджеров и консультантов.
Chat GPT3 продемонстрировал способность выполнять профессиональные задачи, такие как написание программного кода и подготовка юридических документов. Цель этого документа — задокументировать, как Chat GPT3 показал себя на выпускном экзамене по типичному основному курсу MBA «Управление операциями». Экзаменационные вопросы были загружены в том виде, в котором они использовались в настройках окончательного экзамена, а затем были оценены.
«Академическую производительность» Chat GPT3 можно резюмировать следующим образом:
Во-первых - он отлично справляется с базовыми вопросами управления операциями и анализа процессов, включая те, которые основаны на тематических исследованиях. Мало того, что ответы правильные, но объяснения отличные.
Во-вторых - Chat GPT3 иногда делает удивительные ошибки в относительно простых вычислениях на уровне шестого класса математики. Эти ошибки могут быть огромными по величине.
В-третьих - текущая версия Chat GPT не способна обрабатывать более сложные вопросы анализа процессов, даже если они основаны на довольно стандартных шаблонах. Это включает в себя потоки процессов с несколькими продуктами и проблемы со стохастическими эффектами, такими как изменчивость спроса.
Наконец - ChatGPT3 замечательно умеет модифицировать свои ответы в ответ на подсказки человека. Другими словами, в тех случаях, когда изначально не удалось сопоставить проблему с правильным методом решения, Chat GPT3 смог исправить себя после получения соответствующей подсказки от человека-эксперта.
Учитывая эту производительность, Chat GPT3 получил бы на экзамене оценку от B до B-. Это имеет важные последствия для образования в бизнес-школах, включая необходимость проведения экзаменов.