/ Модель

Характеристики

Лицензия
Apache 2.0
Архитектура
gemma4 · dense
Базовая модель
gemma-4-E4B-it
Библиотека
transformers
Опубликована
11 июн 2026

Gemma4-BLIP3o-Captioner-8B

Изображение и текст → текст3 профессии

Gemma4-BLIP3o-Captioner-8B — мультимодальная модель для описания изображений, разработанная prithivMLmods на основе google/gemma-4-E4B-it.

1 519скачиваний за 30 дней3лайкавеса обновлены12 июн 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Она дообучена примерно на 3 тысячах примеров из набора BLIP3o-Pretrain-Long-Caption, чтобы воспроизводить подход BLIP3o к созданию подробных и насыщенных описаний изображений.

Модель предназначена для captioning-сценариев: описания пейзажей, природных сцен, портретов, объектов и других категорий изображений. Она также поддерживает последовательное описание кадров видео, поэтому может применяться для задач, где важен временной порядок визуальных наблюдений. По заявлению автора, шаблон чата содержит встроенную системную инструкцию для детализированных описаний, а режим рассуждений по умолчанию отключён, что ориентировано на низкую задержку. Заявлен английский язык; модель работает с текстом и изображениями. Точный размер контекста и архитектурные параметры в README не указаны, однако доступны версии GGUF с разными уровнями квантования размером примерно от 4,4 до 15,1 ГБ, а также отдельные мультимодальные проекторы.

Сильными сторонами модели являются специализация на структурированных, подробных и контекстно насыщенных описаниях, поддержка локального запуска и последовательной обработки кадров видео. Модель экспериментальная и не является универсальной: при использовании для общего диалога или задач instruction following вне области captioning возможны артефакты и ухудшение качества. Распространяется по лицензии Apache-2.0.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Gemma4-BLIP3o-Captioner-8B

Gemma4-BLIP3o-Captioner-8B is a fine-tuned image captioning model built on top of Gemma-4-E4B-it, designed to mimic and replicate the BLIP3o (Bootstrapped Language-Image Pretraining) Captioning System through targeted fine-tuning on ~3K samples from the BLIP3o-Pretrain-Long-Caption dataset. The model features a modified chat template with a hardcoded expert system prompt engineered for dense, detail-rich image captioning — covering a wide range of image categories including scenery, natural environments, portraits, objects, and more — with thinking mode disabled by default to prioritize low-latency captioning outputs. It supports sequential video frame captioning, making it suitable for temporally ordered visual description tasks. As a captioning-specialized variant, the model may produce artifacts or degraded outputs when used for general-purpose conversational or instruction-following tasks outside its captioning scope. Ideal for applications requiring structured, verbose, and contextually accurate image descriptions in privacy-focused or local inference environments, leveraging the efficient multimodal backbone of Gemma-4-E4B-it.

[!IMPORTANT] Note: This model is experimental and not an all-purpose one.

Model Files

File NameQuant TypeFile SizeFile Link
Gemma4-BLIP3o-Captioner-8B.BF16.ggufBF1615.1 GBDownload
Gemma4-BLIP3o-Captioner-8B.F16.ggufF1615.1 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q2_K.ggufQ2_K4.4 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q3_K_L.ggufQ3_K_L5.02 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q3_K_M.ggufQ3_K_M4.85 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q3_K_S.ggufQ3_K_S4.65 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q4_0.ggufQ4_05.19 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q4_K_M.ggufQ4_K_M5.34 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q4_K_S.ggufQ4_K_S5.2 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q5_0.ggufQ5_05.69 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q5_K_M.ggufQ5_K_M5.76 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q5_K_S.ggufQ5_K_S5.69 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q6_K.ggufQ6_K6.22 GBDownload
Gemma4-BLIP3o-Captioner-8B.Q8_0.ggufQ8_08.01 GBDownload
Gemma4-BLIP3o-Captioner-8B.mmproj-bf16.ggufmmproj-bf16992 MBDownload
Gemma4-BLIP3o-Captioner-8B.mmproj-f16.ggufmmproj-f16992 MBDownload
Gemma4-BLIP3o-Captioner-8B.mmproj-q8_0.ggufmmproj-q8_0560 MBDownload

llama.cpp

LLM inference in C/C++ — https://github.com/ggml-org/llama.cpp

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

GGUF-веса поддерживаются только для текстовых LLM (llama.cpp).

Ревизия весов
2451314

0 моделей