Training procedure
Framework versions
- PEFT 0.4.0.dev0
peft-internal-testing/tiny-OPTForCausalLM-lora — тестовый LoRA-адаптер, опубликованный организацией peft-internal-testing для проверки библиотеки PEFT.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Он подключается к базовой модели hf-internal-testing/tiny-random-OPTForCausalLM через PeftModel и предназначен прежде всего для тестирования загрузки и применения параметрически эффективной настройки, а не для самостоятельного использования как полноценная языковая модель.
Модель основана на архитектуре OPTForCausalLM и поддерживает авторегрессионную генерацию текста, однако точный размер, параметры, языки, длина контекста и практические показатели качества в карточке не указаны. Известна привязка к PEFT и версия PEFT 0.4.0.dev0, использованная в процедуре обучения. Сильная сторона — пригодность для воспроизводимых интеграционных тестов; ограничения — крайне малый тестовый масштаб, отсутствие подтверждённых прикладных характеристик и невозможность делать выводы о качестве на реальных задачах. Лицензия для этого адаптера в доступных данных не указана.
Разделы каталога профессий, в задачах которых используется эта модель
README от автора на Hugging Face, как он его опубликовал
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · peft
Репозиторий содержит только адаптер (LoRA/PEFT) без базовой модели.