/ Модель

Характеристики

Лицензия
MIT
Архитектура
mle · dense
Библиотека
transformers
Опубликована
21 фев 2024

MangaLineExtraction-hf

Преобразование изображенийИзображение, текст → изображение3 профессии

Модель преобразует изображения манги, выделяя линейный рисунок для дальнейшей обработки.

651скачиваний за 30 дней13лайковвеса обновлены10 апр 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

MangaLineExtraction-hf — версия модели MangaLineExtraction_PyTorch, совместимая с библиотекой Transformers. Разработана Chengze Li, Xueting Liu и Tien-Tsin Wong, преобразована Plat и опубликована в формате Safetensors.

Модель предназначена для извлечения линейного рисунка из изображений манги: на вход подаётся изображение, на выходе получается его преобразованная версия с выделенными линиями. В метаданных указаны архитектура MLEForAnimeLineExtraction и задача image-to-image.

Модель распространяется по лицензии MIT. В карточке не приведены сведения о качестве на разных типах изображений и ограничениях применения.

Сценарии применения

  • извлечение контуров из сканов манги
  • подготовка линейного рисунка для раскрашивания
  • выделение линий в иллюстрациях в стиле аниме

Ограничения

Карточка не сообщает точность модели и условия, при которых она может хуже обрабатывать изображения, отличающиеся от манги или аниме.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

MangaLineExtraction-hf

The huggingface transformers compatible version of MangaLineExtraction_PyTorch.

Original repo: https://github.com/ljsabc/MangaLineExtraction_PyTorch

Example

from PIL import Image
import torch

from transformers import AutoModel, AutoImageProcessor

REPO_NAME = "p1atdev/MangaLineExtraction-hf"

model = AutoModel.from_pretrained(REPO_NAME, trust_remote_code=True)
processor = AutoImageProcessor.from_pretrained(REPO_NAME, trust_remote_code=True)

image = Image.open("./sample.jpg")

inputs = processor(image, return_tensors="pt")

with torch.no_grad():
    outputs = model(inputs.pixel_values)

line_image = Image.fromarray(outputs.pixel_values[0].numpy().astype("uint8"), mode="L")
line_image.save("./line_image.png")

or you can use the pipeline

from transformers import pipeline

pipe = pipeline("image-to-image", model="p1atdev/MangaLineExtraction-hf", trust_remote_code=True)
pipe("sample.jpg")
sample.jpgGenerated line image

Model Details

Model Description

This is the model card of a 🤗 transformers model that has been pushed on the Hub. This model card has been automatically generated.

  • Developed by: Chengze Li, Xueting Liu, Tien-Tsin Wong
  • Converted by: Plat
  • License: MIT

Model Sources

Citation

BibTeX:

@article{li-2017-deep,
    author   = {Chengze Li and Xueting Liu and Tien-Tsin Wong},
    title    = {Deep Extraction of Manga Structural Lines},
    journal  = {ACM Transactions on Graphics (SIGGRAPH 2017 issue)},
    month    = {July},
    year     = {2017},
    volume   = {36},
    number   = {4},
    pages    = {117:1--117:12},
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Нельзя запустить

Модели «картинка → картинка» пока не запускаются.

Класс архитектуры
MLEForAnimeLineExtraction
Ревизия весов
3c81525

0 моделей