flax: формат, квантизация, runtime и память принадлежат одному artifact

Русскоязычная модель Longformer с контекстом до 4098 токенов для заполнения пропусков и получения эмбеддингов длинных текстов.

Подходит для: заполнение пропущенных слов в длинном русском тексте · получение эмбеддингов русскоязычных книг и документов · извлечение признаков из длинных текстов

Экспериментальная модель BlockFFN семейства Llama для тестирования ускорения генерации текста на периферийных устройствах.

Подходит для: тестирование ускорения вывода языковой модели · эксперименты с разреженностью активаций по блокам · проверка реализации inference для BlockFFN

FBI-LLM 7B — полностью бинарная языковая модель семейства Llama для исследования генерации текста и обучения LLM с нуля.

Подходит для: исследование полностью бинарных языковых моделей · эксперименты с авторегрессионной дистилляцией · оценка генерации текста бинарной LLM

Griffin-3B — дообученная на Puffin языковая модель на 3,3 млрд параметров для генерации текста и диалоговых ответов.

Подходит для: генерация текстовых ответов на пользовательские запросы · эксперименты с дообучением OpenLLaMA на диалоговых данных · оценка языковой модели на тестах общего рассуждения

Дообученная русскоязычная RoBERTa для извлечения именованных сущностей посредством токенной классификации.

Подходит для: извлечение имён людей из русского текста · поиск организаций в русскоязычных документах · извлечение географических названий из текста