/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
7,1 млрд
Размер весов
14,5 ГБ
Лицензия
Apache 2.0
Архитектура
mistral · dense
Опубликована
2 фев 2024

simba-v01b

Генерация текстаТекст → текст4 профессии

Немецкоязычная модель Mistral, дообученная для упрощения газетных статей и новостных текстов.

25скачиваний за 30 дней6лайковвеса обновлены12 фев 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель Simba-v01b разработана участниками исследовательской группы Public Interest AI при HIIG Berlin. Это плотная языковая модель Mistral с 7,1 млрд параметров, дообученная на примерно 2000 газетных статей, упрощённых Австрийским пресс-агентством. Она генерирует упрощённый текст на немецком языке; лучше всего подходит для новостных статей, а не комментариев и редакционных материалов. Контекст — до 32 768 токенов.

Модель предназначена для упрощения газетных текстов и может применяться к другим типам немецкоязычных текстов, однако её работу за пределами новостного домена подробно не проверяли. Разработчики отмечают, что модель может добавлять неверные сведения, поэтому результат следует сверять с исходным текстом. Опубликована в формате safetensors под лицензией Apache 2.0.

Сценарии применения

  • упрощение немецкоязычных газетных статей
  • адаптация новостных текстов для читателей с низким уровнем грамотности
  • создание упрощённых версий немецких новостных материалов

Ограничения

Обучение проводилось только на газетных статьях, а работа на других типах текстов не проходила обширную проверку. Модель может вносить фактические ошибки, поэтому результат нужно сверять с исходником.

Для каких профессий подходит4

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Model Card for Model ID

We fine-tuned the jphme/em_german_leo_mistral with a set of ca. 2000 newspaper articles which have been simplified by the Austrian Press Agency. Our aim was to have a model which can simplify German-language text.

Model Details

Model Description

  • Developed by: Members of the Public Interest AI research group, HIIG Berlin
  • Model type: simplification model, text generation
  • Language(s) (NLP): German
  • License: Apache 2.0
  • Finetuned from model: jphme/em_german_leo_mistral

Model Sources

Uses

Direct Use

This model works best for simplifying German-language newspaper articles (news items, not commentaries or editorials). It may work for other types of texts.

Downstream Use

We have fine-tuned using only newspaper articles. We have not yet performed extensive out-of-domain testing, but believe that the model's capabilities could be improved by fine-tuning on more diverse data. Contact us if you have a dataset which you think could work (parallel texts, German standard & German simplified).

Bias, Risks, and Limitations

As with most text generation models, the model sometimes produces information that is incorrect.

Recommendations

Please check manually that your output text corresponds to the input text, as factual inconsistencies may have arisen.

How to Get Started with the Model

Use the code below to get started with the model.

[More Information Needed]

Training Details

Training Data

A sample of the data used to train our model can be found here.

Training Hyperparameters

  • Training regime: [More Information Needed]

Evaluation

Summary

For now, we have manually checked the performance of our model on a small sample of texts. Whilst it seems to produce good summaries of all texts, it only seems to simplify newspaper articles (i.e. similar to our training data). We have not yet applied any large-scale metrics based evaluation.

Model Card Contact

simba -at- hiig.de

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
MistralForCausalLM
Ревизия весов
6b01aff

0 моделей