/ Модель

Характеристики

Параметры
1,3 млрд
Лицензия
Apache 2.0
Архитектура
bloom · dense
Опубликована
8 июн 2023

pai-bloom-1b1-text2prompt-sd

Генерация текстаТекст → текст3 профессии

Модель расширяет короткие запросы в подробные англоязычные промпты для генерации изображений.

125скачиваний за 30 дней36лайковвеса обновлены6 мар 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель alibaba-pai/pai-bloom-1b1-text2prompt-sd разработана командой Alibaba PAI и предназначена для автоматического улучшения коротких текстовых запросов для генерации изображений. Она принимает простой промпт и формирует более подробный англоязычный запрос с описанием композиции, стиля, освещения и визуальных деталей, который можно использовать в генераторах изображений, например Stable Diffusion. Модель построена на архитектуре BLOOM, содержит 1,3 млрд параметров и работает с текстом на входе и выходе.

Модель опубликована в форматах PyTorch и Safetensors. В карточке указана лицензия Apache-2.0, однако README также требует соблюдать отдельные специальные условия для открытых AIGC-моделей; перед использованием следует ознакомиться с ними. Примеры показывают ориентацию на создание выразительных художественных промптов, но не содержат количественной оценки качества или сведений о поддерживаемых языках.

Сценарии применения

  • расширение короткого описания сцены для Stable Diffusion
  • добавление художественного стиля и визуальных деталей к промпту
  • подготовка промптов для портретов и цифровых иллюстраций

Ограничения

Примеры в README ориентированы на англоязычные промпты; поддержка других языков и качество на разных типах запросов не описаны. Для использования README требует соблюдать специальные условия открытых AIGC-моделей.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

BeautifulPrompt

简介 Brief Introduction

我们开源了一个自动Prompt生成模型,您可以直接输入一个极其简单的Prompt,就可以得到经过语言模型优化过的Prompt,帮助您更简单地生成高颜值图像。

We release an automatic Prompt generation model, you can directly enter an extremely simple Prompt and get a Prompt optimized by the language model to help you generate more beautiful images simply.

使用 Usage

from transformers import AutoTokenizer, AutoModelForCausalLM

tokenizer = AutoTokenizer.from_pretrained('alibaba-pai/pai-bloom-1b1-text2prompt-sd')
model = AutoModelForCausalLM.from_pretrained('alibaba-pai/pai-bloom-1b1-text2prompt-sd').eval().cuda()

raw_prompt = '1 girl'
input = f'Instruction: Give a simple description of the image to generate a drawing prompt.\nInput: {raw_prompt}\nOutput:'
input_ids = tokenizer.encode(input, return_tensors='pt').cuda()

outputs = model.generate(
    input_ids,
    max_length=384,
    do_sample=True,
    temperature=1.0,
    top_k=50,
    top_p=0.95,
    repetition_penalty=1.2,
    num_return_sequences=5)

prompts = tokenizer.batch_decode(outputs[:, input_ids.size(1):], skip_special_tokens=True)
prompts = [p.strip() for p in prompts]
print(prompts)

作品展示 Gallery

OriginalBeautifulPrompt
prompt: taylor swift, country, golden, fearless,wavehairprompt: portrait of taylor swift as a beautiful woman, long hair, country, golden ratio, intricate, symmetrical, cinematic lighting, highly detailed, digital painting, artstation, concept art, smooth, sharp focus, illustration
OriginalBeautifulPrompt
prompt: A majestic sailing shipprompt: a massive sailing ship, epic, cinematic, artstation, greg rutkowski, james gurney, sparth

使用须知 Notice for Use

使用上述模型需遵守AIGC模型开源特别条款。

If you want to use this model, please read this document carefully and abide by the terms.

Paper Citation

If you find the model useful, please consider cite the paper:

@inproceedings{emnlp2023a,
  author    = {Tingfeng Cao and
            Chengyu Wang and
            Bingyan Liu and
            Ziheng Wu and
            Jinhui Zhu and
            Jun Huang},
  title     = {BeautifulPrompt: Towards Automatic Prompt Engineering for Text-to-Image Synthesis},
  booktitle = {Proceedings of the 2023 Conference on Empirical Methods in Natural Language Processing: Industry Track},
  pages     = {1--11},
  year      = {2023}
}

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
BloomForCausalLM
Ревизия весов
5e43bf4

0 моделей