Описание составлено по карточке модели и метаданным Hugging Face
Rombo-LLM-V2.5-Qwen-7b — дообученная разработчиком Rombo-Org языковая модель на архитектуре Qwen2, основанная на Qwen/Qwen2.5-7B-Instruct. В README указано, что модель получена непрерывным дообучением и объединением instruct- и базовой версий методом TIES; заявлено повышение производительности относительно исходных моделей.
Модель содержит 7,1 млрд параметров, принимает текст и предназначена для генерации текста и диалогов. Максимальная длина контекста составляет 131 072 токена. В метаданных указаны интерфейс вызова инструментов и формат весов safetensors; README также упоминает наличие квантованных версий GGUF. Модель опубликована по лицензии Apache-2.0.
Сценарии применения
ведение диалогов с ассистентом
генерация ответов на текстовые запросы
создание черновиков и продолжение текста
генерация кода по текстовому описанию
формирование структурированных ответов
вызов инструментов в диалоговом интерфейсе
Ограничения
README заявляет о повышении производительности, но не приводит результатов сравнительной оценки или методики тестирования.
Для каких профессий подходит15
Разделы каталога профессий, в задачах которых используется эта модель
Rombos-LLM-V2.5-Qwen-7b is a continues finetuned version of Qwen2.5-7B. I noticed recently that the Qwen team did not learn from my methods of continuous finetuning, the great benefits, and no downsides of it. So I took it upon myself to merge the instruct model with the base model myself using the Ties merge method
This version of the model shows higher performance than the original instruct and base models.