Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
NickyNicky/gemma-1.1-2b-it_oasst_format_chatML_unsloth_V1_function_calling_V2 — разговорная модель на базе Gemma 1.1, дообученная NickyNicky для работы в формате ChatML и сценариев вызова функций. Она предназначена для генерации ответов и диалогового взаимодействия; в метаданных также указаны датасеты для function calling. Модель имеет плотную архитектуру GemmaForCausalLM, содержит 2,5 млрд параметров и поддерживает контекст до 8192 токенов. Поддерживаемый язык карточки — английский.
Модель распространяется в формате safetensors по лицензии Apache-2.0. README не содержит результатов обучения или измерений качества, поэтому пригодность для конкретных сценариев вызова функций следует проверять самостоятельно.
Сценарии применения
ведение диалогов на английском языке
генерация ответов в формате ChatML
создание прототипов ассистентов с вызовом функций
Ограничения
README не приводит результатов обучения или оценок качества; качество вызова функций и устойчивость формата требуют проверки в целевом приложении.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель