Настоящее предназначение OpenAI SORA: как и зачем симулировать «Матрицу» для ChatGPT
Ну что, уже успели прочитать восхищения небывалым качеством видео от нейросетки SORA у всех блогеров и новостных изданий? А теперь мы вам расскажем то, о чем не написал никто: чего на самом деле пытается добиться OpenAI с помощью этой модели, как связана генерация видео с самоездящими машинами и AGI, а также при чем здесь культовая «Матрица».
Из всех технических деталей, представленных в блоге OpenAI, можно сделать вывод, что конкретно пиксели модель рисует сама (без опоры на условный игровой движок Unreal Engine 5) — исследователи даже констатируют, что этот навык появился исключительно при масштабировании модели.
Вот этот момент непонятен - какому такому рисованию пикселей обучилась модель, если она изначально генерировала изображения из пикселей? Может здесь возникли трудности с переводом?
Например, модель могла раскрашивать картинку, полученную в движке, или использовать карту нормалей, полученную не самостоятельно через модель мира, а опять же из условного UE5 для генерируемой сцены.
А тут констатируем факт: модель сама генерирует каждый пиксель, это не какие-то внешние надстройки и постобработки.