Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
CharGPT-96M — компактная языковая модель семейства GPT-2 с посимвольной токенизацией. По карточке Hugging Face, она работает на базе Transformers и PyTorch и предназначена для экспериментов с задачами, в которых токенизация BPE на слова и их части оказывается неудобной. Модель генерирует текст; заявленный контекст — 2048 токенов. В карточке указан русский язык и лицензия OpenRAIL. Подробные примеры использования README отсылает к карточке charllama-35M.
Сценарии применения
эксперименты с посимвольной генерацией текста
генерация русского текста без BPE-токенизации
изучение влияния способа токенизации на качество языковой модели
Ограничения
Модель описана как экспериментальная и может плохо справляться с задачами вне сценариев, где посимвольная токенизация полезна. Контекст ограничен 2048 токенами.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
Это крошечная языковая модель с посимвольной токенизацией для всевозможных экспериментов, когда задача решается плохо из-за BPE токенизации на слова и их части.
Подробное описание и примеры использования можно посмотреть в карточке модели charllama-35M.
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров