/ Модель

Характеристики

Контекст
32 768 токенов
Параметры
31,5 млрд
Размер весов
64 ГБ
Лицензия
Своя лицензия
Архитектура
llama · dense
Библиотека
transformers
Опубликована
9 дек 2024

EXAONE-3.5-32B-Instruct-Llamafied

Генерация текстаТекст → текст5 профессий

Производная модели datalama/EXAONE-3.5-7.8B-Instruct-Llamafied. Разговорная модель EXAONE-3.5 на 7,4 млрд параметров, преобразованная в формат Llama для генерации текста на английском и корейском языках.

22скачиваний за 30 дней1лайквеса обновлены10 дек 2024

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Карточка модели datalama/EXAONE-3.5-32B-Instruct-Llamafied на Hugging Face совпадает с карточкой datalama/EXAONE-3.5-7.8B-Instruct-Llamafied, поэтому описание составлено по ней.

datalama/EXAONE-3.5-7.8B-Instruct-Llamafied — разговорная языковая модель на 7,4 млрд параметров, преобразованная в архитектурный формат Llama из исходной модели EXAONE-3.5 от LG AI Research. Версия использует Transformers и веса Safetensors; в карточке указано контекстное окно 32 768 токенов и поддержка диалога.

Модель предназначена для генерации текста и диалоговых сценариев на английском и корейском языках. Автор карточки сообщает об изменениях в скрипте преобразования, включая настройку масштабирования RoPE для увеличения контекста; исходный скрипт Llamafy, по его словам, может снижать качество. Лицензия обозначена как other, поэтому условия использования следует сверить с лицензией исходной модели.

Сценарии применения

  • диалоговый чат на английском языке
  • диалоговый чат на корейском языке
  • генерация ответов и продолжений текста
  • локальный запуск разговорной языковой модели через Transformers

Ограничения

README предупреждает, что исходный скрипт Llamafy может ухудшать качество; карточка сообщает об исправленной версии преобразования, но не приводит сравнительных оценок. Лицензия указана как other, поэтому перед использованием следует проверить применимые условия.

Для каких профессий подходит5

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Также подходит для

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

Updates in EXAONE-3.5

Key Changes

  • RoPE Scaling Parameter: Added to support longer context_length.
  • Memory Optimization: For the 2.4B model, tie_word_embeddings is set to True for improved memory efficiency.

⚠️ Using the original Llamafy script as-is may lead to performance degradation.

To address this, I have updated the script and uploaded the Llamafied version of the model.

Special Thanks

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
79daec9

0 моделей