/ Модель

Характеристики

Контекст
40 960 токенов
Параметры
1,7 млрд
Архитектура
qwen3 · dense
Базовая модель
Qwen3-1.7B
Библиотека
transformers
Опубликована
21 сен 2026

gpt54-mini-sequential-qwen3-1.7b-rose-s1-babyai-20260920

Генерация текстаТекст → текст3 профессии

Промежуточный чекпойнт Qwen3-1.7B, дообученный методом ROSE для генерации текста и экспериментов в среде BabyAI.

271скачиваний за 30 дней0лайковвеса обновлены21 сен 2026

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Diluner опубликовал дообученный чекпойнт Qwen3-1.7B, обученный методом ROSE с учителем gpt-5.4-mini. Это первый этап последовательной цепочки BabyAI → TextCraft → SearchQA: модель прошла пять эпох и 125 обновлений оптимизатора на этапе BabyAI. Она предназначена для генерации текста и диалогов; метаданные также отмечают поддержку чата. Модель использует плотную архитектуру Qwen3ForCausalLM, содержит 1,7 млрд параметров и рассчитана на контекст до 40 960 токенов. Экспорт выполнен в safetensors для Transformers.

Чекпойнт может служить студенческой моделью для сценариев BabyAI и объектом исследований последовательного обучения. Для этого промежуточного этапа оценка качества не приложена, поэтому результаты финального этапа цепочки к нему неприменимы; README также предупреждает, что это один чекпойнт без подтверждения преимущества метода или воспроизводимости на разных запусках. Лицензия не заявлена: условия использования следует сверить с лицензией базовой Qwen3-1.7B и применимыми условиями.

Сценарии применения

  • генерация текста и диалогов на основе Qwen3
  • эксперименты с агентным обучением в BabyAI
  • исследование последовательного обучения BabyAI → TextCraft → SearchQA

Ограничения

Для этого чекпойнта нет отдельной оценки качества; результаты последующих этапов нельзя переносить на него. README не заявляет лицензию, а воспроизводимость на разных запусках не подтверждена.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

gpt54-mini-sequential-qwen3-1.7b-rose-s1-babyai-20260920

Qwen/Qwen3-1.7B trained with ROSE using teacher gpt-5.4-mini. This is the final checkpoint of a completed babyai stage: five epochs, 125 optimizer updates in that stage.

Sequential stage 1 of BabyAI → TextCraft → SearchQA. Completed training prefix: babyai. Each environment receives five epochs. The student and method are carried through the chain.

Training-completion evidence: Observed complete stage manifest, verified full-step count, and complete controller task with verification marker.

No completed evaluation for this intermediate checkpoint is attached. Final three-environment scores belong only to the fully trained stage-3 model.

Provenance and interpretation notes:

  • This is one trained checkpoint, not evidence of a general method advantage or replication across training seeds.
  • The selection inventory records file names, sizes and modification times. It is not a tensor-byte hash binding to historical evaluation responses.
  • No stage-specific evaluation is attached. Scores of later sequential checkpoints or standalone models must not be attributed to this checkpoint.
  • This checkpoint is from a separate sequential chain, not the historical standalone run. Each stage carries the preceding stage of the same method and student.

The HF export is stored at the repository root; configuration, tokenizer, and all weight shards are included. Optimizer state, raw logs, and teacher trajectories are not included. Machine-readable source references and checksums are in experiment.json.

from transformers import AutoTokenizer, AutoModelForCausalLM
repo_id = "Diluner/gpt54-mini-sequential-qwen3-1.7b-rose-s1-babyai-20260920"
tokenizer = AutoTokenizer.from_pretrained(repo_id)
model = AutoModelForCausalLM.from_pretrained(repo_id, torch_dtype="auto")

Repository access is public, as authorized by the experiment owner. No license is asserted here; consult the base model and applicable terms.

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · transformers

Можно запустить

Подбираем GPU…

Класс архитектуры
Qwen3ForCausalLM
Ревизия весов
228f4bf

0 моделей