/ Модель

Характеристики

Контекст
16 384 токена
Размер весов
2,5 ГБ
Лицензия
Apache 2.0
Архитектура
idefics3 · dense
Базовая модель
SmolVLM-Instruct
Библиотека
transformers
Опубликована
26 ноя 2024

SmolVLM-Instruct-8bit

Изображение и текст → текст5 профессий

Восьмибитная версия SmolVLM-Instruct в формате MLX для ответов на вопросы об изображениях и разбора документов по запросу.

48скачиваний за 30 дней9лайковвеса обновлены29 ноя 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

mlx-community/SmolVLM-Instruct-8bit — версия SmolVLM-Instruct, преобразованная сообществом mlx-community в формат MLX с 8-битным представлением весов с помощью mlx-vlm 0.1.2. Модель основана на HuggingFaceTB/SmolVLM-Instruct и использует плотную архитектуру Idefics3 для генерации текста по текстовому запросу и изображению.

Она предназначена для диалога с изображениями: отвечает на вопросы о визуальном содержимом и помогает разбирать документы. Версия MLX предназначена для запуска через mlx-vlm; карточка содержит инструкцию установки библиотеки. Модель поддерживает английский язык и распространяется по лицензии Apache-2.0.

Сценарии применения

  • ответы на вопросы по содержимому изображения
  • описание объектов и сцен на изображении
  • извлечение сведений из изображённых документов
  • диалог о визуальном содержимом

Ограничения

В предоставленной карточке нет подробной оценки качества или описания ограничений; модель рассчитана на английский язык согласно метаданным.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

mlx-community/SmolVLM-Instruct-8bit

This model was converted to MLX format from HuggingFaceTB/SmolVLM-Instruct using mlx-vlm version 0.1.2. Refer to the original model card for more details on the model.

Use with mlx

pip install -U mlx-vlm
python -m mlx_vlm.generate --model mlx-community/SmolVLM-Instruct-8bit --max-tokens 100 --temp 0.0

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

MLX-модели работают только на Apple Silicon.

Класс архитектуры
Idefics3ForConditionalGeneration
Ревизия весов
c74cb70

0 моделей