Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Dumb-1.1 RC1 — экспериментальная компактная языковая модель серии Dumb от разработчика 56m. Это плотная causal language model на архитектуре LlamaForCausalLM размером 18,9 млн параметров, распространяемая в формате safetensors. Модель предназначена для генерации текста на английском языке и исследовательских экспериментов с малым числом параметров.
Автор описывает её как намеренно слабую модель, способную создавать убедительные, но неверные ответы. В карточке также сообщается, что она впервые в серии набрала более 25% правильных ответов на ARC-Easy. Контекст ограничен 1024 токенами. Модель распространяется по лицензии Apache-2.0.
Сценарии применения
эксперименты с компактными языковыми моделями
генерация английского текста малой моделью
изучение качества ответов LLM на ARC-Easy
Ограничения
Модель намеренно слабая и может уверенно выдавать неверные ответы; контекст ограничен 1024 токенами.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель