/ Модель

Характеристики

Лицензия
Своя лицензия
Опубликована
30 мар 2025

AnimeGamer

Генерация видеоТекст → видео3 профессии

AnimeGamer генерирует последовательные аниме-сцены для симуляции игрового мира, предсказывая следующее состояние игры по визуальной истории.

22скачиваний за 30 дней46лайковвеса обновлены10 апр 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

AnimeGamer — исследовательская система Tencent ARC Lab и City University of Hong Kong для симуляции бесконечной жизни в аниме-игре. Она использует мультимодальные большие языковые модели для интерпретации визуального контекста и предсказания следующего состояния игры, а видеодиффузионная модель генерирует динамические анимационные сцены с движением персонажей.

Модель учитывает историю визуальных кадров, чтобы сохранять согласованность между сценами, и использует представления, учитывающие действия. В карточке указаны формат PyTorch и задача text-to-video; размер модели, контекст, поддерживаемые языки и конкретная лицензия не приведены. Лицензия обозначена как other, поэтому условия использования следует проверять в репозитории.

Сценарии применения

  • генерация аниме-видеоклипов для игровой симуляции
  • визуализация следующего состояния персонажей и игрового мира
  • создание последовательных анимационных сцен с учётом предыдущих кадров

Ограничения

Карточка не сообщает размер модели, поддерживаемые языки и конкретные условия лицензии; качество и устойчивость симуляции не охарактеризованы количественными оценками.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

AnimeGamer: Infinite Anime Life Simulation with Next Game State Prediction

Junhao Cheng1,2, Yuying Ge1,✉, Yixiao Ge1, Jing Liao2, Ying Shan1 1ARC Lab, Tencent PCG, 2City University of Hong Kong

Project Page arXiv Static Badge

Introduction

Experience the endless adventure of infinite anime life with AnimeGamer! 🤩

AnimeGamer is a pioneering model designed for infinite anime life simulation. It leverages Multimodal Large Language Models (MLLMs) to generate dynamic animation shots that depict character movements and updates to character states. By incorporating historical visual context, AnimeGamer ensures contextual consistency and engaging gameplay. AnimeGamer uses novel action-aware multimodal representations and a video diffusion model to produce high-quality video clips, creating an immersive and ever-evolving gaming experience.

Citation

If you find the work helpful, please consider citing:

@article{cheng2025animegamer,
  title={AnimeGamer: Infinite Anime Life Simulation with Next Game State Prediction},
  author={Cheng, Junhao and Ge, Yuying and Ge, Yixiao and Liao, Jing and Shan, Ying},
  journal={arXiv preprint arXiv:2504.01014},
  year={2025}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Генеративная модель выложена не в формате diffusers.

Ревизия весов
a9a2384

0 моделей