Характеристики

Лицензия: Apache 2.0
Архитектура: midi_model · dense
Библиотека: transformers
Опубликована: 29 сен 2024

Ссылки

Hugging Face

midi-model-tv2o-medium

skytnt

Языковая модель3 профессии

Трансформер SkyTNT генерирует музыкальные последовательности в формате MIDI.

551скачиваний за 30 дней27лайковвеса обновлены31 окт 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

midi-model-tv2o-medium — трансформерная модель SkyTNT для генерации музыки в формате MIDI. Версия tv2o использует оптимизированный MIDI-токенизатор MidiTokenizerV2. Модель обучена на наборах Los-Angeles-MIDI-Dataset, Monster-MIDI-Dataset и SymphonyNet MIDI Dataset.

Модель предназначена для создания музыкальных последовательностей и MIDI-фрагментов. В репозитории есть веса PyTorch и ONNX; указана лицензия Apache-2.0. README приводит значение validation loss 0,2159, но не уточняет метод его расчёта или сравнительную оценку качества.

Сценарии применения

генерация музыкальных MIDI-фрагментов
создание мелодий для музыкальных проектов
подготовка MIDI-последовательностей для редактирования в секвенсоре

Ограничения

Описание не указывает длину генерируемых последовательностей, параметры управления композицией или оценку качества относительно других моделей.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

IV.9Отраслевые задачиМедиа, журналистика, культура, архивы и игрыAI помогает создавать, искать, сохранять и персонализировать медиа, культурный и игровой контент.44 задачи14 938моделей IV.5Отраслевые задачиОбразование и развитие навыковAI помогает персонализировать обучение и снижать административную нагрузку на преподавателей.34 задачи6 641модель II.10Разработка и данныеРазработка и эксплуатация AI/ML-системAI помогает создавать, оценивать, развёртывать и контролировать AI/ML-системы на всём жизненном цикле.30 задач49 000моделей

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model Card for midi-model-tv2o-medium

Midi event transformer for music generation.

Model Updates

new tv2o-medium model: "tvo" means MidiTokenizerV2 optimised.

Model Details

Model Description

Developed by: SkyTNT
Trained by: SkyTNT
Model type: Transformer
License: apache-2.0

Model Sources

Repository: https://github.com/SkyTNT/midi-model
Demo: https://huggingface.co/spaces/skytnt/midi-composer

Training Details

Training Data

Training Hyperparameters

config: tv2o-medium
max-len: 2048 then 4096
lr: 1e-4 then 2e-4
weight-decay: 0.01
batch: 2x2x2
bfloat16 precision

Loss

val loss: 0.2159

Files

model.ckpt: latest model checkpoint
onnx/*.onnx: onnx format model

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

У модели не указана задача.

Класс архитектуры: MIDIModel
Ревизия весов: 0f8f265