/ Модель

Характеристики

Лицензия
Своя лицензия
Базовая модель
sam3
Опубликована
31 авг 2026

SYNTOM-SAM3

Генерация масокИзображение → mask

Дообученная на синтетических данных версия SAM 3 для сегментации листьев, стеблей, цветков и плодов томата по текстовым подсказкам.

0скачиваний за 30 дней1лайквеса обновлены31 авг 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

SYNTOM-SAM3 — полное дообучение SAM 3 от Meta, выполненное авторами проекта ECCV26-Tomato-Phenotyping на синтетическом наборе SYNTOM. Модель сегментирует органы томата по текстовым подсказкам: листья, стебли, цветки и плоды. Веса предназначены для загрузки через пакет sam3 и используют имена параметров исследовательской реализации SAM 3.

Модель рассчитана на фенотипирование томатов по фотографиям тепличных растений. Хотя обучение проводилось только на синтетических данных, авторы оценивали её на реальных фотографиях из трёх наборов данных. Для сегментации плодов она показала макроусреднённый IoU 0,6562 против 0,5269 у SAM 3 без дообучения; результат зависит от набора данных. Репозиторий содержит веса PyTorch объёмом 3,1 ГиБ. На веса распространяется лицензия SAM; метаданные обозначают лицензию как other.

Сценарии применения

  • сегментация плодов томата на тепличных фотографиях
  • выделение листьев томата для фенотипирования
  • сегментация стеблей томатных растений
  • выделение цветков томата на изображениях
  • оценка площади плодов по маскам объектов

Ограничения

Модель специализирована на четырёх органах томата и оценивалась на ограниченном наборе реальных тепличных датасетов; качество различается между наборами. Для загрузки требуется пакет sam3 и исследовательская реализация с соответствующими именами параметров.

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

SYNTOM-SAM3: SAM 3 fine-tuned for tomato organ segmentation

SAM 3 fully fine-tuned on SYNTOM, for text-conditioned segmentation of four tomato organs: leaf, stem, flower, fruit.

This is the Full FT SAM 3 model from Text-conditioned Segmentation for Tomato Phenotyping via Procedural Synthetic Data, the variant that scores best on real greenhouse imagery in the paper.

Trained only on synthetic data, evaluated on real photographs.

Results

Fruit IoU on three real-world tomato datasets, predictions reduced to fruit vs non-fruit:

modelTomatoMAPLaboroRob2Phenomacroimage-weighted
this model0.77850.73710.45290.65620.7372
zero-shot SAM 30.59380.68750.29950.52690.6210

Fine-tuning on synthetic data lifts macro fruit IoU by 13 points over the zero-shot baseline, without a single real training image.

Files

sam3_fullft_syntom.pt      the weights, 3.1 GiB
provenance.json            file size and checksum
LICENSE                    the SAM License, which governs these weights

Loading

import torch

sd = torch.load("sam3_fullft_syntom.pt", map_location="cpu", weights_only=True)["model"]
model.detector.load_state_dict(sd, strict=False)

The keys address SAM 3's detector and use the research code's parameter names, so load them with the sam3 package rather than transformers. Meta publishes SAM 3 in both forms. This fine-tune follows the sam3.pt one.

License

These weights are a derivative work of Meta's SAM 3 and are distributed under the SAM License, a copy of which is in LICENSE. They are not covered by the CC BY 4.0 licence on the SYNTOM dataset, which is a separate artifact.

They are provided "as is", without warranties or conditions of any kind, express or implied, and without any guarantee of fitness for a particular purpose. You are solely responsible for determining whether they are appropriate for your use and assume all risk arising from it.

Section 1(b)(ii) of the SAM License requires that published research using SAM Materials acknowledge them, so cite SAM 3 alongside this work.

Citation

Accepted at the 11th Workshop on Computer Vision in Plant Phenotyping and Agriculture (CVPPA), in conjunction with the European Conference on Computer Vision (ECCV), Malmo, Sweden, September 2026.

@inproceedings{mounir2026syntom,
  title         = {Text-conditioned Segmentation for Tomato Phenotyping via
                   Procedural Synthetic Data},
  author        = {Mounir Samy, Cieslak Mikolaj, Dhieb Najmeddine,
                   Ghazzai Hakim, Klein Jonathan, Froehlich Katja,
                   Pirk Soeren, Palubicki Wojciech, Setti Gianluca,
                   Eltawil Ahmed M., Michels Dominik L.},
  booktitle     = {11th Workshop on Computer Vision in Plant Phenotyping and
                   Agriculture (CVPPA), in conjunction with the European
                   Conference on Computer Vision (ECCV)},
  address       = {Malmo, Sweden},
  month         = sep,
  year          = {2026},
  eprint        = {2607.18576},
  archivePrefix = {arXiv},
  primaryClass  = {cs.CV}
}

Acknowledgment

This work was supported by funding from King Abdullah University of Science and Technology (KAUST) - Center of Excellence on Sustainable Food Security, under award number 5934.

Contact

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Нельзя запустить

В репозитории нет config.json: не понять архитектуру модели.

Ревизия весов
2544893

0 моделей