Чат-модель Llama с 7,5 млрд параметров, дообученная для генерации текста на французском языке в профессиональных сценариях.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
MATH Lvl 5
MATH Lvl 5 Raw · выше — лучше
0,0363
Публичная таблицадругая ревизия
MMLU-PRO
MMLU-PRO Raw · выше — лучше
0,2635
Публичная таблицадругая ревизия
Описание составлено по карточке модели и метаданным Hugging Face
Enno-Ai/EnnoAi-Pro-French-Llama-3-8B-v0.4 — чат-модель для генерации текста на базе плотной архитектуры Llama, разработанная Enno-Ai. Это альфа-версия, дообученная методом QLoRA на отобранном французском профессиональном датасете и предназначенная для профессиональных сценариев общения и генерации текста. Модель содержит 7,5 млрд параметров, принимает контекст длиной до 8192 токенов и доступна в формате safetensors.
Карточка указывает французский как основной язык и английский как дополнительный. Модель распространяется по лицензии CreativeML Open RAIL-M. README отмечает, что разработка ещё продолжается, поэтому качество и пригодность для конкретных профессиональных задач следует проверять отдельно.
Это альфа-версия, и README сообщает, что модель находится в разработке; качество для конкретных профессиональных задач требует проверки. Заявленная ориентация на профессиональное применение не подкреплена подробным описанием задач или оценок.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
Suitable model for professional use
Selected French professional dataset
Use specific receipices with QLora methods
This model is under construction
Detailed results can be found here
| Metric | Value |
|---|---|
| Avg. | 15.18 |
| IFEval (0-Shot) | 41.89 |
| BBH (3-Shot) | 16.88 |
| MATH Lvl 5 (4-Shot) | 0.60 |
| GPQA (0-shot) | 2.80 |
| MuSR (0-shot) | 10.76 |
| MMLU-PRO (5-shot) | 18.16 |
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…