5 Open-Source LLM моделей для создания своего AI помощника

5 Open-Source LLM моделей для создания своего AI помощника

ИИ помощники — это не просто временное увлечение..

К 2030 году они могут стать индустрией стоимостью 150 миллиардов долларов, как говорится в недавней статье Ark Invest. Эти ИИ помощники, способны кардинально изменить наше взаимодействие с технологиями и друг с другом.

Такие приложения как Replika, Gatebox, HeraHaven и SoulMachines, привлекают миллионы пользователей каждый месяц, согласно данным Similarweb.

Если вы решили создать ИИ помощника, то первый вопрос с чего начать?

В частности, какую большую языковую модель (LLM) выбрать для своего приложения? Сегодня мы расскажем о лучших LLM моделях с открытым исходным кодом, доступных на данный момент, и о том, почему они могут идеально подойти для вашего проекта.

Выбор подходящего LLM для AI

Когда вы задумываетесь об ИИ помощнике, одно из первых решений, которое вам нужно будет принять, - это какой тип LLM с открытым исходным кодом использовать.

Существует несколько типов LLM, но в целом они делятся на три категории: базовые модели, модели настраиваемые на инструкции, и модели настраиваемые на чат.

Почему так важны модели, настроенные на чат?

Базовые модели - это сырые, не доработанные версии LLM, которые были обучены на больших наборах данных, но не имеют тонких настроек, необходимых для решения конкретных задач.

Модели, настроенные на инструкции, были усовершенствованы для более точного выполнения человеческих инструкций. Однако, когда речь идет о создании ИИ помощников, предпочтение отдается моделям, настроенным на общение. Эти модели специально оптимизированы для разговорного взаимодействия, что делает их более подходящими для тонких, постоянных диалогов.

Размер модели: насколько велик?

Еще одним важным фактором является размер модели. Для большинства чат-ботов для общения должно быть достаточно модели с параметрами 8B. Эти модели обеспечивают хороший баланс между производительностью и эффективностью использования ресурсов, что делает их идеальными для большинства приложений. Однако, если вы хотите пойти дальше — возможно, стремясь создать более совершенный искусственный интеллект, — вам, возможно, захочется изучить модели с параметрами до 70B.

Вот 5 лучших Open-Source LLM моделей

1. Hermes 3 - Llama-3.1 8B

5 Open-Source LLM моделей для создания своего AI помощника

Hermes-3 Llama-3.1-8B - это мощная модель, которая была специально разработана для приложений чата. Она обеспечивает хороший баланс между возможностями и эффективностью, что делает ее лучшим выбором для общения с помощью искусственного интеллекта.

2. Yi-1.5-9B-Chat

5 Open-Source LLM моделей для создания своего AI помощника

Yi-1.5-9B-Chat - еще один отличный вариант, который может похвастаться чуть большим количеством параметров, что позволяет вести более сложные и тонкие разговоры. Если ваш ИИ помощник должен легко справляться с широким кругом тем, стоит обратить внимание на эту модель.

3. InternLM2 5-7B Chat

5 Open-Source LLM моделей для создания своего AI помощника

InternLM2 5-7B Chat - это более легкая модель, которая, тем не менее, обладает мощным потенциалом. Благодаря меньшим размерам она идеально подходит для приложений, где ресурсы ограничены, но глубина разговора по-прежнему является приоритетом.

4. Humanish-Roleplay-Llama-3.1-8B

5 Open-Source LLM моделей для создания своего AI помощника

Humanish-Roleplay-Llama-3.1-8B - эта модель предназначена для ролевых игр, что делает ее идеальной для пользователей, которым нужен ИИ помощник, способный принимать различные образы. Будь то дружеская беседа или более сложное взаимодействие, эта модель отлично справляется с разными ролями.

5. OpenChat-3.5-1210

5 Open-Source LLM моделей для создания своего AI помощника

OpenChat-3.5-1210 - это одна из самых крупных моделей в этом списке, оптимизированная для глубоких и увлекательных бесед. Если ваш ИИ помощник должен предлагать захватывающий опыт, эта модель - сильный соперник.

2 комментария

InternLM2 - какое-то УГ во-первых 8b не может весить 2ГБ На простое "Привет" ответила мне: "Привет! Как дела? Ваши собесельбовки напоминают ли тебя о частицах из нашего мира?" (Сис промпт был "Говори на русском языке")

OpenChat совсем уж тормозной
Yi1.5 не прошёл нашу проверку, хоть и показался сначала нормальным

Мы остановились на модели Qwen2.5 17b q8 - скорость приемлемая, качество отменное, русский язык чистый.

1
Ответить

Спасибо за информацию, буду иметь ввиду

Ответить