Дообученная на MFANN модель семейства Phi с 3,5 млрд параметров для генерации текста и классификации.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
MFANN 3b version 0.7 — дообученная модель семейства Phi, созданная netcat420 на датасете MFANN в состоянии на 5 мая 2024 года. Она рассчитана на генерацию текста и, согласно метаданным каталога, также поддерживает классификацию текста. Модель содержит 3,5 млрд параметров, использует архитектуру PhiForCausalLM и принимает контекст длиной до 2048 токенов.
В карточке приведены результаты на ARC, HellaSwag, MMLU, TruthfulQA, Winogrande и GSM8K; наивысший из перечисленных результатов — 77,66 на Winogrande. Автор характеризует модель как нецензурированную. Модель распространяется в формате safetensors по лицензии Apache-2.0. Качество зависит от задачи; результаты карточки не гарантируют аналогичной точности в реальном применении.
В карточке приведены результаты нескольких бенчмарков, но они не гарантируют качество на пользовательских задачах. Автор называет модель нецензурированной, поэтому её ответы могут включать нежелательный контент.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
MFANN 3b version 0.7
fine-tuned on the MFANN dataset as it stands on 5/5/2024 as it is an ever changing and expaning dataset.
62.98 <- Average 61.69 <- ARC 75.98 <- HellaSwag 55.4 <- MMLU 53.49 <- TruthfulQA 77.66 <- Winogrande (this models strong-suit) 53.68 <- GSM8K
this model is completely uncensored
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…