У модели ChatGPT плохо с разнообразием идей — это подтвердило новое исследование
Новое исследование в Nature Human Behavior выявило интересный парадокс: ChatGPT действительно генерирует большое количество идей за сеанс, но большинство из них оказались схожими друг с другом — и недостаточно разнообразными для эффективного мозгового штурма.
В эксперименте участвовали студенты, которым предложили придумать идеи для игрушки на основе кирпича и вентилятора. Их разделили на три группы:
- Одна генерировала идеи самостоятельно.
- Вторая сочетала собственные идеи с поиском в интернете.
- Третья — полностью полагалась на ChatGPT (использовали версии GPT‑3.5 и GPT‑4).
У группы с ChatGPT 94 % идей оказались похожими друг на друга — они часто повторяли схожие концепции. Даже GPT‑4, несмотря на улучшенное разнообразие по сравнению с GPT‑3.5, отставал от участников, работающих самостоятельно.
В свою очередь, те, кто комбинировал личные идеи и интернет-поиск, показали наибольшее разнообразие — их предложения почти не пересекались.
Создатели ИИ заявляют, что языковые модели идеально подходят для брейншторма, но реальные данные говорят об обратном: ИИ часто ограничен собственной «экосистемой идей», тогда как человек в сочетании с поиском может выйти за рамки шаблона.
Профессор Тервиеш, один из авторов исследования, подчеркивает, что речь идёт не о социальной идентичности, а именно о разнообразии идей как ключевом ресурсе для инноваций, по аналогии с разнообразием в экосистемах природы.
Чтобы повысить уровень разнообразия идей, исследователи предлагают:
- Использовать «цепочку мышления» при запросах к ChatGPT — просить ИИ давать идеи, действительно отличные друг от друга.
- Совмещать работу с ИИ и собственную креативность — сначала придумать идею самому, потом уточнить её с помощью модели.
ИИ эффективен для быстрого генерирования идей — но не заменяет богатство и глубину человеческого мышления, особенно в режимах, где требуется нестандартное мышление и вариативность.
А вы пробовали генерировать идеи с помощью ChatGPT?