Модели Granite превосходят модели с открытым исходным кодом по всем параметрам. На рисунке показано, как Granite-8B-CodeBase превосходит Mistral-7B, LLama-3-8B и другие модели с открытым исходным кодом в трех задачах кодинга. Полные оценки можно найти здесь.
Написано: "Модели Granite превосходят модели с открытым исходным кодом по всем параметрам." И тут же на графике показано что в разделе Fixing Code побеждает другая модель - google CodeGemma 7b instruct 🤔