/ Модель

Характеристики

Контекст
4 096 токенов
Параметры
218 млн
Архитектура
llama · dense
Опубликована
8 окт 2023

informer-0.2b-4k

Генерация текстаТекст → текст3 профессии

Компактная базовая авторегрессионная модель семейства Llama для генерации и продолжения текста на английском и китайском языках.

229скачиваний за 30 дней4лайкавеса обновлены22 окт 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

hongyin/informer-0.2b-4k — базовая авторегрессионная языковая модель, разработанная автором репозитория hongyin и обученная с нуля. Она использует плотную архитектуру семейства Llama и предназначена для продолжения текста и экспериментов с генерацией, а не для диалогового общения в роли чат-бота.

Модель содержит 218,3 млн параметров, принимает текст и имеет контекстное окно 4096 токенов. В карточке заявлена поддержка английского и китайского языков. Модель описана как вычислительно недорогая и удобная для запуска; README сообщает об уникальном словаре, но не приводит подробностей об обучающих данных или оценках качества.

Лицензия в предоставленных данных не указана. Результаты следует оценивать для конкретного сценария; модель не позиционируется как готовый чат-бот.

Сценарии применения

  • продолжение англоязычного текста
  • продолжение китайскоязычного текста
  • эксперименты с компактными языковыми моделями
  • генерация текста при ограниченных вычислительных ресурсах

Ограничения

README указывает, что это базовая модель, не предназначенная для использования в качестве чат-бота. Данные об обучающем корпусе и оценках качества не приведены.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

hongyin/informer-0.2b

I am pleased to introduce to you an English-Chinese bilingual autoregressive language model. This model is trained from scratch and has a unique vocabulary and 20 million parameters based on the LLAMA2 model structure. Our goal is to provide a solution that is computationally cheap and easy to inference. It's important to note that this is a base model, not intended to be used as a chatbot, but rather for alchemy. We look forward to providing you with a practical model product.

To put aside the damn high-sounding words, the name of each model has rich connotations and personal experience, including the previous model, and it is worth reminding us repeatedly.

Bibtex entry and citation info

Please cite if you find it helpful.

@article{zhu2023metaaid,
  title={MetaAID 2.0: An Extensible Framework for Developing Metaverse Applications via Human-controllable Pre-trained Models},
  author={Zhu, Hongyin},
  journal={arXiv preprint arXiv:2302.13173},
  year={2023}
}


license: other

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
1cd4d5b

0 моделей