/ Модель
Каталог

Характеристики

Контекст
32 768 токенов
Параметры
71 млрд
Размер весов
145 ГБ
Лицензия
Apache 2.0
Архитектура
llama · dense
Опубликована
1 апр 2024

Ссылки

Hugging Face

Le_Triomphant-ECE-TW3

paloalma
Генерация текстаТекст → текст7 профессий

Слитая с помощью mergekit 71-миллиардная модель семейства Llama для генерации текста с контекстом до 32 768 токенов.

16 702скачиваний за 30 дней5лайковвеса обновлены6 мая 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Открыть конструктор бенчмарка

Публичные оценки6

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

  • MUSR

    MUSR Raw · выше — лучше

    Результат

    0,4725

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

  • MMLU-PRO

    MMLU-PRO Raw · выше — лучше

    Результат

    0,4763

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

  • BBH

    BBH Raw · выше — лучше

    Результат

    0,6112

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

  • MATH Lvl 5

    MATH Lvl 5 Raw · выше — лучше

    Результат

    0,1949

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

  • IFEval

    IFEval Raw · выше — лучше

    Результат

    0,5402

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

  • GPQA

    GPQA Raw · выше — лучше

    Результат

    0,349

    Open LLM v2 · архив

    Публичная таблицаревизия совпадает

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Le_Triomphant-ECE-TW3 — языковая модель, созданная студентами инженерной школы ECE Луи Гарсиа и Матьё Жолларом под руководством преподавателя ECE и сооснователя TW3 Partners Андре-Луи Роше и технического директора TW3 Partners Поля Леметра. Модель получена слиянием abacusai/Smaug-72B-v0.1 и MTSAIR/MultiVerse_70B с помощью mergekit; проект поддержали ECE и RunPod.

Это плотная авторегрессионная модель семейства Llama с 71 млрд параметров, предназначенная для генерации текста. Контекст составляет до 32 768 токенов. Репозиторий содержит веса в формате safetensors. Лицензия — Apache-2.0.

Модель можно использовать для генерации и продолжения текста в приложениях на базе Transformers. В README не приведены результаты оценки качества, специальные предметные области или перечень поддерживаемых языков, поэтому сравнивать её возможности с моделями-основами по этим данным нельзя.

Сценарии применения

  • генерация текста по запросу
  • продолжение заданного текста
  • создание диалоговых ответов
  • развёртывание языковой модели в приложениях на Transformers

Ограничения

README не сообщает о результатах тестирования, поэтому качество модели и её преимущества перед моделями-основами по имеющимся данным оценить нельзя. Поддерживаемые языки не перечислены.

Для каких профессий подходит7

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии
I.5Универсальные способностиСоздание и редактирование текстаAI помогает создавать и улучшать текстовые материалы, сохраняя смысл и требования автора.18 задач44 385моделейII.6Разработка и данныеДокументация и сопровождение разработкиAI помогает поддерживать понятную техническую документацию и ускорять передачу знаний.18 задач38 015моделейI.2Универсальные способностиСинтез, понимание и проверка знанийAI помогает сжимать, сопоставлять и критически проверять знания без потери существенного контекста.18 задач42 341модельI.7Универсальные способностиРечь, диалоги и встречиAI помогает понимать разговорную речь, поддерживать диалог и превращать встречи в структурированные результаты.17 задач26 923модели

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Le_Triomphant-ECE-TW3

This model has been produced by :

Under the supervision of :

With the contribution of :

  • ECE engineering school as sponsor and financial contributor
  • RunPod as financial contributor

About ECE

ECE, a multi-program, multi-campus, and multi-sector engineering school specializing in digital engineering, trains engineers and technology experts for the 21st century, capable of meeting the challenges of the dual digital and sustainable development revolutions. French Engineering School ECE

Le_Triomphant-ECE-TW3

Le_Triomphant-ECE-TW3 is a merge of the following models using mergekit:

🧩 Configuration

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

vLLM

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
f723992

0 моделей

    Создать бенчмарк