Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Florence-2-VQAJP2 — дообученная модель семейства Florence-2, созданная на основе microsoft/Florence-2-base-ft. Разработчик дообучил её на датасете Kendamarron/japanese-photo-instruction для задачи создания подписей к изображениям на японском языке. Для получения результата README рекомендует использовать запрос CAPTION.
Модель принимает изображение и текстовый запрос, а выдаёт текстовое описание на японском языке. В метаданных указаны архитектура Florence2ForConditionalGeneration, библиотека Transformers и формат весов safetensors. На оценочной выборке сообщается значение loss 0,77. Лицензия — MIT.
Подходит для автоматического создания японских подписей к фотографиям и описания изображений в приложениях, рассчитанных на японский язык. README не приводит подробностей о данных обучения, методике оценки или практических ограничениях; качество на иных типах изображений и языках по имеющимся сведениям оценить нельзя.
Сценарии применения
создание японских подписей к фотографиям
автоматическое описание изображений на японском языке
подготовка текстовых описаний японских фотоколлекций
Ограничения
Оценка на иных типах изображений и качество за пределами японских подписей не описаны. Данные обучения и подробности оценки в README не раскрыты.
Для каких профессий подходит3
Разделы каталога профессий, в задачах которых используется эта модель