/ Модель
Каталог

Характеристики

Контекст
2 048 токенов
Параметры
20,8 млн
Лицензия
Своя лицензия
Архитектура
opt · dense
Опубликована
31 янв 2023

Ссылки

Hugging Face

OPT-19M-ChatSalad

concedo
Генерация текстаТекст → текст3 профессии

Экспериментальная OPT-модель Concedo на 20,8 млн параметров для локальной генерации текста.

174скачиваний за 30 дней18лайковвеса обновлены31 янв 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

OPT-19M-ChatSalad — небольшая экспериментальная языковая модель Concedo на архитектуре OPT, обученная с нуля как практика подготовки датасетов. Она предназначена для генерации текста и запуска локально, в том числе на процессоре; автор рекомендует использовать её с KoboldAI и приводит параметры сэмплирования для генерации. Модель содержит 20,8 млн параметров, принимает текст и выдаёт текст, её контекст составляет 2048 токенов.

В метаданных указан английский язык. По README автор разрешает использовать модель для любых целей; в метаданных лицензия обозначена как other, поэтому конкретные юридические условия лицензии по этим источникам установить нельзя. Небольшой размер способствует быстрому запуску на CPU, но модель описана как экспериментальная и обученная для практики, без заявлений о качестве или надёжности.

Сценарии применения

  • эксперименты с локальной генерацией текста на CPU
  • практика подготовки датасетов для языковых моделей
  • тестирование параметров сэмплирования в KoboldAI

Ограничения

Модель экспериментальная и создана как практика подготовки датасетов; README не приводит оценок качества или гарантий надёжности. Условия лицензии в метаданных указаны как other, хотя README заявляет о свободном использовании.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии
II.10Разработка и данныеРазработка и эксплуатация AI/ML-системAI помогает создавать, оценивать, развёртывать и контролировать AI/ML-системы на всём жизненном цикле.30 задач49 000моделейI.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделейII.6Разработка и данныеДокументация и сопровождение разработкиAI помогает поддерживать понятную техническую документацию и ускорять передачу знаний.18 задач38 015моделей

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

OPT-19M-ChatSalad

This is an experimental OPT-based model with 19 million parameters trained entirely from scratch as a datasetting practice. Thus, it should not be subject to the usual OPT license. You are free to use this model for any purpose. The model is small enough (under 40mb) that it should run at very fast speeds even entirely on CPU.

It is recommend to use this model with the KoboldAI software, with the following parameters:

  • Temperature: 0.9
  • Repetition Penalty: 1.1
  • Repetition Penalty Slope: 0.7
  • Repetition Penalty Range: 1024
  • Top-P Sampling: 0.9
  • Disable all other samplers

All feedback and comments can be directed to Concedo on the KoboldAI discord.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
OPTForCausalLM
Ревизия весов
3930ca6

0 моделей

    Создать бенчмарк