Дообученная Qwen2.5-Coder-3B-Instruct генерирует Google-style docstrings для функций Python.
Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды
Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.
Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.
Напишите запросы, при необходимости приложите файлы и эталонные ответы.
Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.
Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.
В подключённых источниках результатов для этой модели пока нет.
Описание составлено по карточке модели и метаданным Hugging Face
Модель sathudeva7/qwen2.5-coder-3b-docstrings — дообученная версия Qwen2.5-Coder-3B-Instruct для генерации Google-style docstrings к функциям Python. Она принимает текстовое описание или код одной функции и предназначена для сценариев, где нужно автоматически добавлять документацию к исходному коду. Модель построена на плотной архитектуре Qwen2 и содержит 3,1 млрд параметров; заявленный размер контекста — 32 768 токенов.
В README указан узкий обучающий набор из 212 функций с docstring от учителя и проверкой через AST; для получения ожидаемого результата следует отправлять функцию с системным промптом из проекта автора. Модель использует формат safetensors и основана на QLoRA-дообучении с последующим объединением адаптеров с базовой моделью. Лицензия в метаданных обозначена как other, без уточнения её условий.
Карточка не сообщает результатов оценки качества, поэтому надёжность генерации для разных стилей кода и языков не установлена; обучение ориентировано на Python и Google-style docstrings.
Дообучение выполнено на 212 функциях Python, поэтому качество на других языках программирования и форматах документации не подтверждено. Для ожидаемого поведения README требует использовать системный промпт проекта автора; условия лицензии other не уточнены.
README от автора на Hugging Face, как он его опубликовал
QLoRA fine-tune of Qwen/Qwen2.5-Coder-3B-Instruct (adapters merged with merge_and_unload()), trained on 212 teacher-written Python functions with ast-checked docstrings. Send one function as the user message with the system prompt from task2_genai/prompts.py; the reply is the docstring text. Training and evaluation: https://github.com/sathudeva7/CDAZZDEV-MLE-SATHURSAN/tree/main/task2_genai
На своей GPU в ailist. Цена — по текущим предложениям провайдеров
GPU в ailist
Универсальный рантайм · transformers
Подбираем GPU…