Характеристики

Лицензия: Apache 2.0
Опубликована: 7 авг 2024

Ссылки

hibou-L

Эмбеддинги изображенийИзображение → embedding3 профессии

Hibou-L — предварительно обученный визуальный энкодер для извлечения признаков из гистологических изображений в цифровой патологии.

5 763скачиваний за 30 дней26лайковвеса обновлены20 авг 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Hibou-L — большая модель Vision Transformer для цифровой патологии, разработанная HistAI. Она предварительно обучена в рамках подхода DINOv2 на частном наборе из 1,2 млрд изображений и предназначена для извлечения признаков из изображений тканей. Модель можно использовать как визуальный энкодер в системах анализа гистологических изображений и как основу для последующей настройки под конкретные задачи патологии.

Репозиторий содержит веса в формате safetensors и использует модифицированную реализацию DINOv2 из Transformers с поддержкой register-токенов. Для загрузки через AutoImageProcessor и AutoModel требуется включить trust_remote_code=True. Лицензия — Apache-2.0. Карточка также упоминает вариант Hibou-B.

Сценарии применения

извлечение признаков из гистологических изображений
подготовка эмбеддингов тканей для последующей классификации
создание визуальных представлений для поиска похожих тканевых изображений
использование как основы для моделей анализа патологии

Ограничения

Для загрузки требуется trust_remote_code=True из-за кастомной реализации DINOv2. Предварительное обучение описано на частном наборе данных; карточка не приводит сведения о независимой оценке качества или клинической валидации.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

IV.6Отраслевые задачиНаучные исследования, математика и новые материалыAI помогает формировать гипотезы, анализировать научные данные и ускорять открытие новых материалов и методов.39 задач4 120моделей IV.4Отраслевые задачиКлиническая медицина и общественное здоровьеAI помогает поддерживать диагностику, лечение, наблюдение и организацию медицинской помощи.45 задач2 635моделей IV.5Отраслевые задачиОбразование и развитие навыковAI помогает персонализировать обучение и снижать административную нагрузку на преподавателей.34 задачи6 641модель

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Hibou-L - a Foundational Vision Transformer for digital pathology pretrained on a 1.2B image private dataset using DINOv2 framework.

For more information and examples of usage visit https://github.com/HistAI/hibou and read the paper.

Hibou-B is also available at https://huggingface.co/histai/hibou-b

Basic usage:

from transformers import AutoImageProcessor, AutoModel

processor = AutoImageProcessor.from_pretrained("histai/hibou-L", trust_remote_code=True)
model = AutoModel.from_pretrained("histai/hibou-L", trust_remote_code=True)

We use a customized implementation of the DINOv2 architecture from the transformers library to add support for registers, which requires the trust_remote_code=True flag.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

Доступ к модели ограничен автором; у платформы нет доступа к весам.

Ревизия весов: 31a3b9f