Компактная диалоговая модель ReDiX на базе Phi-3.5, дообученная для генерации текста на итальянском и английском языках.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
ReDiX/Artemide-3.5 — компактная диалоговая языковая модель, созданная ReDiX дообучением Microsoft Phi-3.5-mini-instruct на наборе ReDiX/DataForge. Датасет состоит из многошаговых диалогов на итальянском и английском языках. Модель построена на плотной архитектуре Phi-3 и содержит около 3,7 млрд параметров; она принимает текст и генерирует текст, поддерживает контекст длиной до 4096 токенов.
Модель предназначена для диалогов и генерации ответов на итальянском и английском языках. В README приведены результаты оценки на итальянских вариантах MMLU, ARC и HellaSwag, однако они сами по себе не гарантируют качество в конкретных сценариях. Модель распространяется по лицензии MIT.
Карточка сообщает об обучении на итальянских и английских диалогах и приводит результаты ограниченного набора итальянских бенчмарков; качество для других языков и задач этими данными не подтверждено. Контекст ограничен 4096 токенами.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
This model is a finetuned version of Phi-3.5-mini-instruct on the ReDiX/DataForge dataset. The dataset is a mixture of high quality italian and english multiturn conversations.
| Model | Parameters | Average | MMLU_IT | ARC_IT | HELLASWAG_IT |
|---|---|---|---|---|---|
| ReDiX/Artemide-3.5 | 3.82 B | 57.87 | 60.16 | 52.1 | 61.36 |
| meta-llama/Meta-Llama-3.1-8B-Instruct | 8.03 B | 56.97 | 58.43 | 48.42 | 64.07 |
| microsoft/Phi-3.5-mini-instruct | 3.82 B | 56.82 | 60.03 | 49.19 | 61.25 |
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…