Плотная Llama-модель на 10,7 млрд параметров для генерации текста на корейском языке.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
mssma/ko-solar-10.7b-v0.4 — причинная языковая модель семейства Llama, опубликованная пользователем mssma. Это плотная модель с 10,7 млрд параметров для генерации текста; карточка демонстрирует загрузку через Transformers и использование весов в формате safetensors. Метаданные указывают корейский язык и контекст длиной 2048 токенов.
Модель можно использовать для генерации продолжений текста и других сценариев на основе text-generation. Она распространяется по лицензии Apache-2.0. Карточка не описывает специальную настройку, обучение или оценку качества, поэтому её пригодность для конкретных задач следует проверять отдельно.
Контекст модели ограничен 2048 токенами. README не приводит результатов оценки качества или сведений о специальной настройке модели.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
from transformers import AutoModelForCausalLM, AutoTokenizer
import torch
path = "mssma/ko-solar-10.7b-v0.4"
model = AutoModelForCausalLM.from_pretrained(
path,
return_dict=True,
torch_dtype=torch.float16,
device_map='auto'
)
tokenizer = AutoTokenizer.from_pretrained(path)
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…