/ Модель

Характеристики

Контекст
32 764 токена
Параметры
68,7 млрд
Размер весов
138 ГБ
Лицензия
Apache 2.0
Архитектура
llama · dense
Базовая модель
miqu-1-70b-sf
Библиотека
transformers
Опубликована
10 мар 2024

Liberated-Miqu-70B

Генерация текстаТекст → текст6 профессий

Дообученная 70-миллиардная модель семейства Llama для генерации текста и ведения диалогов на английском языке.

19скачиваний за 30 дней4лайкавеса обновлены10 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Liberated Miqu 70B — дообученная Abideen языковая модель семейства Llama с плотной архитектурой, предназначенная для генерации текста и диалогов. Она содержит 68,7 млрд параметров и рассчитана на контекст до 32 764 токенов. Модель дообучена на наборе Abacus AI SystemChat в течение одной эпохи; автор сообщает об обучении на двух GPU A100.

Модель подходит для диалоговых приложений и генерации ответов на английском языке. В карточке указана лицензия Apache-2.0. Результаты оценки качества пока не опубликованы, поэтому качество на конкретных задачах по представленным данным оценить нельзя.

Сценарии применения

  • создание англоязычного чат-бота
  • генерация ответов в диалоговом приложении
  • составление текстовых ответов по запросу
  • развёртывание языковой модели с контекстом до 32 тысяч токенов

Ограничения

Результаты оценки качества в карточке отсутствуют. У модели 68,7 млрд параметров, поэтому её запуск требует значительных вычислительных ресурсов.

Для каких профессий подходит6

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Liberated Miqu 70B

image/jpeg

Liberated Miqu 70B is a fine-tune of Miqu-70B on Abacus AI's SystemChat dataset. This model has been trained on 2xA100 GPUs for 1 epoch.

🏆 Evaluation results

Coming soon

Framework versions

  • Transformers 4.38.0.dev0
  • Pytorch 2.1.2+cu118
  • Datasets 2.17.0
  • Tokenizers 0.15.0
  • axolotl: 0.4.0

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
2efb6ad

0 моделей