В Швейцарии представили первую в стране открытую языковую модель Apertus
В Швейцарии представили Apertus — первую в стране крупную открытую языковую модель. Её особенность в том, что всё сделано максимально прозрачно: от архитектуры и весов до данных и рецептов обучения. Вся информация открыта для исследователей, разработчиков и компаний, что делает Apertus одним из немногих проектов такого масштаба, доступных в открытом формате.
Модель разработана совместно учёными из Федеральной политехнической школы Лозанны (EPFL), Цюрихского политеха (ETH Zurich) и Швейцарского национального суперкомпьютерного центра. Apertus доступна сразу в двух версиях — с 8 и 70 миллиардами параметров. Более лёгкая подходит для индивидуальных проектов, более крупная — для серьёзных приложений. Оба варианта можно свободно скачать с платформы Hugging Face или использовать через сервисы Swisscom.
Название модели переводится с латыни как «открытый» и подчёркивает её миссию. Apertus обучена на 15 триллионах токенов и поддерживает свыше тысячи языков. В отличие от большинства современных моделей, примерно 40% данных составляют тексты не на английском языке, включая такие редкие, как швейцарский диалект немецкого или романшский. Это делает проект одним из самых многоязычных в мире.
Учёные подчеркивают, что целью запуска было не создание очередного коммерческого продукта, а развитие открытой инфраструктуры для всех. Apertus можно использовать в образовании, науке, при разработке чат-ботов, систем перевода или других приложений. По сути, это шаг к тому, чтобы ИИ стал общественным ресурсом, наподобие дорог или электричества.
Важной частью проекта стала и юридическая сторона: при создании учитывались швейцарские законы о защите данных, авторские права и требования нового Европейского акта об искусственном интеллекте. Для обучения использовались только открытые данные, при этом были исключены персональные сведения и сайты, которые явно запретили использовать свои материалы.
Разработчики подчёркивают: выпуск Apertus — это только начало. В будущем планируется расширять семейство моделей, делать их более энергоэффективными и адаптировать под конкретные области — от права до медицины и климатических исследований.