c4-ko-cleaned-2데이터셋 테스트용 모델입니다.
모델 정보
vocab size: 52000
max position embeddings: 1024
hidden size: 512
num attention heads: 16
num key value heads: 4
num hidden layers: 2
Характеристики
- Контекст
- 1 024 токена
- Параметры
- 61,8 млн
- Лицензия
- MIT
- Архитектура
- llama · dense
- Опубликована
- 20 июл 2024
Ссылки
squirrel-c4-ko-cleaned-2
Небольшая модель Llama для генерации корейского текста и тестирования на наборе c4-ko-cleaned-2.
132скачиваний за 30 дней0лайковвеса обновлены20 июл 2024
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Это небольшая авторегрессионная языковая модель семейства Llama, созданная blueapple8259 для тестирования на наборе данных c4-ko-cleaned-2. Модель предназначена для генерации текста; в карточке указаны словарь из 52 000 токенов, скрытый размер 512, 16 голов внимания, 4 группы key/value и 2 слоя. Контекст ограничен 1024 токенами.
Модель принимает текст и генерирует текст. В метаданных указан корейский язык и набор данных blueapple8259/c4-ko-cleaned-2. Вес модели занимает 61,8 млн параметров и опубликован в формате safetensors.
Модель помечена как тестовая для указанного набора данных, поэтому её качество для практических задач не подтверждено. Лицензия — MIT.
Сценарии применения
- тестирование генерации текста на корейском корпусе C4
- эксперименты с компактной языковой моделью
- проверка конвейера генерации текста
Ограничения
Модель обозначена как тестовая, поэтому её качество для прикладного использования не подтверждено. Контекст ограничен 1024 токенами.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель
II.10Разработка и данныеРазработка и эксплуатация AI/ML-системAI помогает создавать, оценивать, развёртывать и контролировать AI/ML-системы на всём жизненном цикле.30 задач49 000моделейII.4Разработка и данныеОтладка, тестирование и качество ПОAI помогает находить дефекты, строить проверки и повышать надёжность программного продукта.25 задач13 978моделейIV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделей
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- LlamaForCausalLM
- Ревизия весов
- 6430156