Описание составлено по карточке модели и метаданным Hugging Face
SJT-4B — языковая модель Sakalti для генерации текста и диалогового общения. Это плотная модель семейства Llama с архитектурой LlamaForCausalLM и примерно 3,7 млрд параметров, дообученная на Sakalti/Tara-3.8B-v1.1 с использованием Unsloth и TRL. В обучении использовались наборы yahma/alpaca-cleaned и HachiML/Hachi-Alpaca.
Модель подходит для генерации ответов в чате и выполнения инструкций на английском языке. Контекст составляет 4096 токенов; веса представлены в формате Safetensors. Метаданные указывают лицензию MIT, тогда как README заявляет Apache-2.0, поэтому условия распространения следует сверить с автором репозитория. Датасет yahma/alpaca-cleaned указан как распространяемый по CC BY-SA 4.0.
Сценарии применения
генерация ответов в текстовом чате
ответы на инструкции на английском языке
создание черновиков и кратких текстов
эксперименты с компактными диалоговыми LLM
Ограничения
Контекст ограничен 4096 токенами. В README и метаданных указаны разные лицензии модели: Apache-2.0 и MIT соответственно.
Для каких профессий подходит5
Разделы каталога профессий, в задачах которых используется эта модель