/ Модель

Характеристики

Параметры
403 млн
Архитектура
clip_vision_model · dense
Базовая модель
clip-vit-large-patch14
Опубликована
29 апр 2024

clip-vit-large-patch14_sun397

ЭмбеддингиТекст → embedding3 профессии

Дообученная на SUN397 зрительная модель CLIP для извлечения признаков изображений и распознавания сцен.

13 467скачиваний за 30 дней0лайковвеса обновлены29 апр 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Эмбеддинги» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

tanganke/clip-vit-large-patch14_sun397 — дообученная модель на архитектуре CLIP ViT-Large с размером патча 14, созданная на основе openai/clip-vit-large-patch14. Модель с 402,7 млн параметров предназначена для извлечения признаков изображений и классификации сцен по категориям набора SUN397.

В README приведены результаты оценки: 0,683 для исходной модели и 0,828 после дообучения. Репозиторий содержит веса в формате safetensors. Это зрительная модель CLIP; данные о поддержке естественных языков, контекстном окне и лицензии в предоставленных источниках отсутствуют.

Сценарии применения

  • извлечение признаков изображений для поиска по сценам
  • классификация изображений по категориям SUN397
  • сравнение изображений с текстовыми категориями сцен

Ограничения

README сообщает результаты оценки на SUN397, но не описывает перенос качества на другие наборы данных. Лицензия в предоставленных источниках не указана.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model Card

Model Details

  • Architecture: ViT-Large with patch size 14
  • Training Data: SUN397 dataset

Training Details

Adam Optimizer with a constant learning rate 1e-5 for 4000 steps training (batch_size=32). Only the vision encoder is fine-tuned.

Evaluation Results

  • pre-trained: 0.6830110549926758
  • fine-tuned: 0.8275973796844482

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
CLIPVisionModel
Ревизия весов
3b814ef

0 моделей