Небольшая базовая англоязычная модель SupraLabs для экспериментов с предобучением и отправной точки для дальнейшего дообучения.
Подходит для: эксперименты с предобучением малых языковых моделей · изучение влияния масштаба модели и состава данных · дообучение на инструкциях
Базовая языковая модель SupraLabs с контекстом 5 120 токенов, предназначенная для дальнейшей тонкой настройки и обучения с подкреплением.
Подходит для: дальнейшая тонкая настройка небольшой языковой модели · эксперименты с продолженным предобучением и расширенным контекстом · создание прототипа англоязычного текстового генератора
Экспериментальная базовая модель SupraLabs на архитектуре Qwen3 для изучения масштабирования сверхмалых языковых моделей и проверки конвейеров обучения.
Подходит для: исследование масштабирования языковых моделей с числом параметров менее миллиона · абляции архитектуры трансформеров для генерации текста · проверка конвейера обучения малых языковых моделей
Экспериментальная сверхмалая LLaMA-модель SupraLabs для демонстрации генерации текста при размере около 1 тыс. параметров.
Подходит для: изучение устройства сверхмалых языковых моделей · эксперименты с масштабированием параметров модели · демонстрация генерации текста на малом объёме вычислений
Экспериментальная компактная рекуррентная языковая модель SupraLabs для генерации продолжения текста без Transformer и механизма внимания.
Подходит для: эксперименты с генерацией текста на модели малого размера · изучение разреженных рекуррентных архитектур для языкового моделирования · исследование сохранения контекста через состояние нейронов
Экспериментальная сверхкомпактная модель SupraLabs для генерации английского текста и изучения запуска и дообучения малых языковых моделей.
Подходит для: эксперименты с генерацией текста на английском языке · обучение и тестирование малых языковых моделей · запуск генеративной модели на устройствах с ограниченными ресурсами
Сверхкомпактная англоязычная модель SupraLabs для экспериментов с генерацией текста и обучением маленьких языковых моделей.
Подходит для: демонстрация авторегрессионной генерации текста на крошечной модели · образовательные эксперименты с архитектурой Llama · тестирование запуска языковых моделей на CPU и ограниченных устройствах
Supertron-2.1-8B-A1B — дообученная Surpem языковая модель-ассистент для диалога, программирования, математики, рассуждений и работы с текстом.
Подходит для: ответы на общие вопросы в диалоге · объяснение и отладка кода · решение математических задач с пояснениями
Базовая Llama-совместимая модель Supra на 51,8 млн параметров с контекстом 5 120 токенов для дальнейшего дообучения под текстовые задачи.
Подходит для: продолжение предобучения компактной языковой модели · основа для SFT чат-модели · подготовка базовой модели для обучения с подкреплением
safetensors: формат, квантизация, runtime и память принадлежат одному artifact
Дообученная на базе Whisper Medium модель для автоматической расшифровки речи в текст.
Подходит для: транскрибация аудиозаписей · распознавание речи в голосовых сообщениях · создание текстовых расшифровок разговоров
safetensors: формат, квантизация, runtime и память принадлежат одному artifact