Характеристики

Лицензия: Своя лицензия
Опубликована: 8 июл 2024

Ссылки

Hugging Face arXiv 2405.09818

chameleon-30b

facebook

Изображение и текст → текст

Meta Chameleon 30B — мультимодальная модель FAIR/Meta для формирования текстовых ответов по изображениям и тексту.

1скачиваний за 30 дней90лайковвеса обновлены30 июл 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Meta Chameleon 30B — смешанная мультимодальная фундаментальная модель с ранним объединением модальностей, разработанная исследовательской группой FAIR компании Meta. Репозиторий содержит чекпойнт семейства Chameleon с 30 миллиардами параметров. Модель предназначена для задач, в которых нужно совместно обрабатывать изображения и текст и формировать текстовый ответ.

Карточка связывает модель с задачей image-text-to-text и указывает поддержку vision; веса представлены в формате safetensors. В README сказано, что подробности и примеры использования появятся позднее. Лицензия обозначена как other, поэтому конкретные условия использования следует сверять с лицензией репозитория.

Сценарии применения

ответы на вопросы по изображению
описание содержимого изображения
диалог с изображениями
совместная обработка текста и изображений

Ограничения

README не содержит подробностей об использовании и примеров, а карточка не указывает поддерживаемые естественные языки. Лицензия помечена как other; условия использования следует проверять в репозитории.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Meta Chameleon 30B

Repository for Meta Chameleon, a mixed-modal early-fusion foundation model from FAIR. See the Chameleon paper for more information.

The Chameleon collection on HuggingFace contains 7 billion parameter and 30 billion parameter model checkpoints.

[more details and usage examples coming soon]

Citation

To cite the paper, model, or software, please use the below:

@article{Chameleon_Team_Chameleon_Mixed-Modal_Early-Fusion_2024,
  author = {Chameleon Team},
  doi = {10.48550/arXiv.2405.09818},
  journal = {arXiv preprint arXiv:2405.09818},
  title = {Chameleon: Mixed-Modal Early-Fusion Foundation Models},
  url = {https://github.com/facebookresearch/chameleon},
  year = {2024}
}

License

Use of this repository and related resources are governed by the Chameleon Research License and this repository's LICENSE file.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Доступ к модели ограничен автором; у платформы нет доступа к весам.

Ревизия весов: e0f9893