Uploaded model
- Developed by: abcorrea
- License: apache-2.0
- Finetuned from model : abcorrea/llama-3.2-1b-wiki-ft-v1
This llama model was trained 2x faster with Unsloth and Huggingface's TRL library.
Характеристики
- Контекст
- 131 072 токена
- Параметры
- 1,2 млрд
- Лицензия
- Apache 2.0
- Архитектура
- llama · dense
- Базовая модель
- llama-3.2-1b-wiki-ft-v1
- Опубликована
- 2 апр 2025
Ссылки
llama-3.2-1b-tinystories-ft-1k
Генерация текстаТекст → текст
Производная модели abcorrea/llama-3.2-1b-tinystories-ft-25k. Дообученная текстовая модель Llama на 1,2 млрд параметров для генерации текста на английском языке.
118скачиваний за 30 дней0лайковвеса обновлены2 апр 2025
Бенчмарки
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Тесты пользователейпока нет
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Добавьте модель в бенчмарк
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Опишите свои задачи
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Запустите и опубликуйте
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Публичные оценки
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Карточка модели abcorrea/llama-3.2-1b-tinystories-ft-1k на Hugging Face совпадает с карточкой abcorrea/llama-3.2-1b-tinystories-ft-25k, поэтому описание составлено по ней.
Модель abcorrea/llama-3.2-1b-tinystories-ft-25k — текстовая генеративная модель семейства Llama, разработанная abcorrea и дообученная на основе abcorrea/llama-3.2-1b-wiki-ft-v1. Она предназначена для генерации текста; в названии репозитория указана связь с TinyStories, однако README не раскрывает состав обучения и целевые сценарии подробнее.
Модель содержит 1,2 млрд параметров, использует плотную архитектуру LlamaForCausalLM и поддерживает контекст до 131 072 токенов. В карточке указан английский язык. Обучение проводилось с использованием Unsloth и библиотеки Hugging Face TRL. Модель распространяется в форматах PyTorch и safetensors под лицензией Apache-2.0.
Сценарии применения
- генерация коротких историй на английском языке
- продолжение заданного текста
- создание черновиков англоязычного текста
Ограничения
README не сообщает результаты оценивания и не уточняет свойства обучения на TinyStories, поэтому качество и специализацию для рассказов нельзя подтвердить по карточке.
Карточка модели
README от автора на Hugging Face, как он его опубликовал
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм
Подбираем GPU…
- Класс архитектуры
- LlamaForCausalLM
- Ревизия весов
- df79556