xAI опубликовала исходный код чат-бота Grok Статьи редакции
Модель содержит 314 млрд параметров.
- Компания xAI, которую Илон Маск запустил летом 2023 года, опубликовала исходный код чат-бота Grok.
- В сообщении xAI говорится, что языковая модель Grok-1 содержит 314 млрд параметров, а опубликованные данные включают «веса базовой модели и сетевую архитектуру». Её обучение завершилось в октябре 2023 года.
- Grok-1 распрострняется по лицензии Apache 2.0, которая позволяет использовать модель в коммерческих целях, но не включает данные, используемые для обучения.
- xAI представила чат-бота Grok в ноябре 2023 года. Он доступен пользователям X с подпиской Premium+ за $16 в месяц. Бот может генерировать тексты по запросу и отвечать на вопросы в режиме реального времени. Разработчики заявляли, что Grok способен отвечать на «острые» вопросы, которые блокируются большинством ИИ-систем.
- 11 марта 2024 года Илон Маск пообещал опубликовать исходный код Grok. Он объяснил шаг стремление сделать платформу «самой прозрачной и ориентированной на поиск истины».
- До этого он подал иск к OpenAI и её сооснователям Сэму Альтману и Грегу Брокману — из-за того, что компания якобы пренебрегла условием работать как некоммерческая организация и «на благо человечества».
25K
показов
6.2K
открытий
Интересно vps потянет 🤔
Там на гпу вычисления вероятнее всего
Но ждём квантиризованную версию под ЦПУ от того же gpt4all
Это что за ноу-хау?
Поищите gpt4all, фактически - мысль в том, что если оч умную модель немного "урезать", она останется очень умной. Такая же идея как с голограммой - по куску голограммы можно увидеть ее целиком но с определенного ракурса.