Cloudflare выпустила открытые модели решений Clef
Обе модели, Clef (https://huggingface.co/Cloudflare/clef) и Clef-flash (https://huggingface.co/Cloudflare/clef-flash), вышли с открытыми весами и сразу появились (https://blog.cloudflare.com/clef-decision-models/) в облачной платформе компании Workers AI.
Такие модели не пишут текст, а возвращают вероятности вариантов на типизированные вопросы, по которым агент или программа выбирает следующее действие.
Clef построена на Qwen3.8-27B, Clef-flash – на Qwen3.5-9B. Обе принимают текст, JSON, изображения и видео, держат контекст 64 тысячи токенов и полностью совместимы с System One API, формат, который TypeSafe AI представила вместе с моделью Jev.
Главный соперник Clef – как раз Jev, которая работает только с текстом и закрыта.
Модели дообучали с функцией потерь Брайера, чтобы их вероятности совпадали с реальной частотой правильных ответов.
🟡Тесты
По замерам на 43 тестах медианная задержка Clef составила 209 мс, Clef-flash – 39 мс, Jev – 524 мс.
В классификации банковских запросов BANKING77 Clef набрала 94,2 балла макро-F1 против 79,7 у Jev, в поиске инструментов ToolRet – 69,2 против 65,3 по nDCG@10.
Внутри Cloudflare Clef уже классифицирует домены для разведки угроз, разбирает тикеты поддержки и отличает полезных краулеров от вредных.
В Workers AI миллион входных токенов стоит 24 цента для Clef и 9 центов для Clef-flash.
Для сравнения, Jev у TypeSafe AI тот же миллион входных токенов стоит 4 цента.
Дообучать Clef под свои задачи клиенты пока могут только вместе с инженерами Cloudflare, самостоятельный сервис обещан позже.
📌Лицензирование: Apache 2.0
🟡Блогпост (https://blog.cloudflare.com/clef-decision-models/) 🟡Документация (https://developers.cloudflare.com/workers-ai/models/clef/?cf_page=clef-decision-models%2F) 🟡Веса Clef (https://huggingface.co/Cloudflare/clef) 🟡Веса Clef Flash (https://huggingface.co/Cloudflare/clef-flash) 🟡Демо (https://huggingface.co/spaces/hugging-apps/clef-decision-model) 🟡Лидерборд (https://clef-evals.workers-ai-mle.workers.dev/)