Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Что умеет модель
Описание составлено по карточке модели и метаданным Hugging Face
Trillama-8B — языковая модель на архитектуре Llama 3, разработанная Senseable и дообученная на базе Llama-3-8B. Она предназначена для генерации текста в диалоге и ответов на запросы, с акцентом разработчика на логическое мышление и рассуждения. Модель содержит 7,5 млрд параметров и поддерживает контекст до 8192 токенов; в метаданных указан английский язык.
Модель подходит для диалоговых помощников, объяснения понятий и задач, требующих рассуждений. Карточка демонстрирует запуск через Transformers с точностью bfloat16. Лицензия указана как Llama 2 License; качество рассуждений и результаты оценивания в карточке не приведены.
Сценарии применения
ответы на вопросы в диалоговом помощнике
объяснение понятий и идей
генерация текста по запросу
решение задач, требующих логического рассуждения
Ограничения
Карточка не приводит оценок качества или конкретных бенчмарков рассуждений. Контекст ограничен 8192 токенами.
Для каких профессий подходит7
Разделы каталога профессий, в задачах которых используется эта модель
Trillama-8B is a 8B LLM that builds upon the foundation of Llama-3-8B, the lastest model from Meta. It's a fine-tune focused on improving the model's already strong logic and reasoning.
import transformers
import torch
model_id = "senseable/Trillama-8B"
pipeline = transformers.pipeline(
"text-generation", model=model_id, model_kwargs={"torch_dtype": torch.bfloat16}, device_map="auto"
)
pipeline("Explain the meaning of life.")
Как запустить
На своей GPU в ailist. Цена — по текущим предложениям провайдеров