Видео, 3D и игры из кода на React. Разбираем локальный Rust-движок Raea для ИИ-агентов

Программная генерация видео через код, как в популярных фреймворках Remotion или Hyperframes всегда страдала от одной фундаментальной болезни, браузера под капотом. Чтобы собрать ролик из React-компонентов, эти инструменты запускают безголовый Chromium, покадрово делают скриншоты DOM-дерева и склеивают их в видео. На сложных сценах такой пайплайн безбожно тормозит и пожирает ресурсы процессора.

На GitHub вышел бесплатный движок Raea, который выкидывает браузерную прослойку из уравнения и переносит рендеринг напрямую на видеокарту. По замерам автора, на тяжелых сценах и обработке видео это дает ускорение в 10–20 раз.

React снаружи, Rust и Bevy внутри

Главная идея Raea оставить привычный для нейросетей и веб-разработчиков синтаксис, но полностью переписать ядро отрисовки:

  • Фронтенд для ИИ. Все сцены, анимации и логика по-прежнему описываются на стандартном TypeScript и React. ИИ-модели идеально знают этот стек, поэтому им не нужно учить специфические языки шейдеров или сложные API.
  • Нативный рендер. Вместо браузера код исполняется локальным движком, написанным на Rust и игровом фреймворке Bevy. Отрисовка идет напрямую через GPU вашего компьютера.
  • Широкий профиль. Движок собирает не только плоские рекламные ролики и моушн-графику, но и полноценные 3D-сцены с освещением и движением камеры, генерирует музыку, звуковые эффекты и даже интерактивные игры с физикой и управлением.

Полная автономия в связке с Claude Code

Инструмент изначально спроектирован под автономных агентов и имеет готовую интеграцию с Claude Code.

Рабочий процесс сводится к одному промпту, вы описываете задачу, агент сам пишет код композиции на React, запускает локальный рендер, самостоятельно проверяет сгенерированные кадры на ошибки (например, поехавшую верстку, перекрытие текста или проблемы со звуком) и при необходимости сам правит код до получения чистого результата.

Проект кроссплатформенный, работает локально на Windows, macOS и Linux без привязки к платным облачным очередям.

Не отставайте от технологий! Подписывайтесь на Telegram-канал, чтобы быть в курсе последних трендов и лайфхаков.