🤖 Итоги недели в мире ИИ и обзоры новых сервисов: новые модели для генерации впечатляющих видео

Привет!

Мы запустили еженедельную email-рассылку, посвященную последним новостям и тенденциям в мире искусственного интеллекта. Наша цель – держать подписчиков в курсе самых интересных открытий, исследований и приложений ИИ.

В еженедельных письмах ты найдешь:

• Новости о прорывных исследованиях в области машинного обучения и нейросетей.
• Материалы о применении ИИ в разных сферах – медицине, бизнесе, науке, производстве и образовании.
• Статьи об этических аспектах развития технологий.
• Подборки лучших онлайн-курсов и видеолекций по машинному обучению.
• Обзоры инструментов и библиотек для разработки нейронных сетей.
• Ссылки на репозитории с открытым исходным кодом ИИ-проектов.
• Фильмы, сериалы и книги, которые заслуживают внимания AI энтузиастов.

В Пасадене (штат Калифорния) открывается первая закусочная CaliExpress by Flippy, полностью управляемая ИИ. OpenAI объявила о запуске долгожданного магазина кастомных чат-ботов и 30 новых инструментов для разработчиков и не только.

Разработчики Allen Institute for AI представили новую мультимодальную модель Unified-IO 2, которая может дать общее представление о том, какой функциональностью должен будет обладать ChatGPT-5, чтобы не уступать опенсорсным собратьям.

NVIDIA выпустила модель для распознавания речи Parakeet, которая по всем показателям превосходит OpenAI Whisper.

Использование ИИ в совместном научном проекте Microsoft и Тихоокеанской северо-западной национальной лаборатории в течение недели помогло определить новый элемент, который поможет снизить на 70% использование лития в батареях. Без ИИ такое исследование заняло бы по меньшей мере 20 лет.

Компания ByteDance выпустила новую модель MagicVideo-V2 для генерации видео. По оценкам экспертов, возможности модели превосходят Pika, Runway и Stable Diffusion Video.

OpenAI объявила о запуске долгожданного магазина кастомных чат-ботов.

Figure AI продолжает совершенствовать робота-гуманоида Figure 01: теперь его можно научить выполнять различные домашние дела – например, готовить кофе.

Стартап Rabbit представил новый AI-гаджет – R1. Это персональный помощник для молниеносного выполнения задач, которые обычно требуют использования нескольких мобильных приложений и занимают слишком много времени. От множества подобных ИИ-девайсов это устройство отличают собственная операционная система на основе LAM (большинство hardware-ассистентов используют GPT4-V), способность обучаться, молодежный дизайн и демократичная цена $199.

В Пасадене (штат Калифорния) открывается первая закусочная CaliExpress by Flippy, полностью управляемая ИИ. Оборудование для приготовления фастфуда создано компанией Miso Robotics.

Auto Wiki – генерирует вики-документацию для GitHub репозиториев.

Code to Flow – визуализирует, анализирует и объясняет код, написанный на всех популярных языках и фреймворках.

Concepto – платформа для создания прототипов веб-приложений: здесь можно преобразовать в HTML/CSS/JS код нарисованный в редакторе интерфейс или скриншот приглянувшегося сайта.

Afforai – выполняет суммаризацию, перевод и поиск по множеству документов, чтобы предоставить максимально точный и релевантный ответ на запрос.

Corgea – исправляет уязвимые фрагменты кода.

Jan – опенсорсный оффлайновый чат-бот.

Stylar – мощный, многофункциональный ИИ-генератор и помощник для иллюстраторов и дизайнеров всех направлений.

Neuralhub – предоставляет платформу для создания и тестирования нейросетей.

Artflow – создает короткие анимированные истории в любом стиле. Конструктор персонажей обеспечивает одинаковый внешний вид героев во всех сценах, а полный контроль над камерами позволяет воплотить в жизнь любую идею.

QRCodeCreator – бесплатно генерирует уникальные QR-коды.

Informly – выполняет всестороннюю оценку бизнес-идей.

Plus AI – плагин для Google Slides: делает профессиональные презентации, персональные и командные дашборды, любые отчеты.

TextBlaze – дополняет текст, многократно ускоряя процесс создания контента.

Sendspark – автоматически персонализирует одно и то же видео для разной аудитории.

My AskAI – создает чат-ботов для экономии времени сотрудников техподдержки и пользовательского сервиса.

PocketAI – чат-бот для WhatsApp*. Использует три модели – GPT-3.5, GPT4-V и PocketMed. Содержит библиотеку плагинов и эффективных промптов, генерирует и анализирует изображения, позволяет беседовать с документами.

Items – генерирует фотографии, элементы дизайна, иконки, 3D-ассеты в любом стиле.

Followr – автоматизирует ведение соцсетей.

Genie – создает качественные 3D-модели за несколько секунд.

Fixkey – автоматически исправляет любые опечатки.

ShotSolve – отвечает на вопросы по скриншотам. Работает на macOS, использует ключ GPT4-V.

iStock – платный генератор высококачественных стоковых изображений. Работает на модели Picasso, созданной NVIDIA и натренированной на контенте стока Getty Images.

Frase – создает и оптимизирует контент для вывода в топ поисковых результатов Google.

InMagic.ai – поможет стать звездой Инстаграма*: проанализирует профиль, даст советы по развитию, подготовит нужный контент.

Fliz – генерирует видео по URL.

WikiChat – опенсорсный инструмент для коррекции галлюцинаций с помощью информации из Википедии.

Подробная шпаргалка и советы по созданию продвинутых RAG.

OpenVoice – опенсорный инструмент для мгновенного клонирования голоса.

Туториал по работе с новым API Query Pipelines показывает примеры создания простых линейных цепочек и сложных ациклических графов из модулей LlamaIndex (языковых моделей, промптов, механизмов запросов и извлечения). Рассказано, как подключить стандартные и пользовательские компоненты, как выполнить интеграцию с системами наблюдения за выполнением запросов – все это очень упрощает создание сложных приложений на основе LLM.

Туториал по объединению LLM с помощью mergekit детально разбирает 4 основных метода объединения моделей:

• SLERP (сферическая линейная интерполяция) – плавное объединение двух моделей с сохранением геометрических свойств.
• TIES – эффективное объединение нескольких моделей, обученных на разных задачах, с устранением избыточных параметров и конфликтов между весами.
• DARE – похожий на TIES метод, но с дополнительным обрезанием параметров и масштабированием весов.
• Passthrough ­– конкатенация слоев разных моделей для получения гибридных моделей.

В качестве примера показан процесс создания модели Marcoro14-7B-slerp (из двух других моделей) при помощи метода SLERP. Тестирование полученной модель показывает превосходство по сравнению с OpenHermes-2.5-Mistral-7B.

* Инстаграм и WhatsApp принадлежат компании Meta, деятельность которой признана экстремистской и запрещена на территории РФ.

Автор рассылки: Наталья Кайда