Мультимодальная модель Xiaomi MiMo на 9 млрд параметров для агентных задач, программирования, кибербезопасности и анализа изображений.
Подходит для: написание и исправление кода · выполнение многошаговых агентных задач · анализ изображений в диалоге
ModujoMoE — базовая MoE-языковая модель для продолжения текста и дальнейших экспериментов с предобучением и настройкой.
Подходит для: продолжение короткого текста на португальском языке · эксперименты с дообучением языковой модели · исследование маршрутизации экспертов в MoE-моделях
Экспериментальная базовая MoE-модель на 1 млрд параметров для продолжения текста и исследований языкового моделирования.
Подходит для: продолжение короткого текстового фрагмента · эксперименты с базовыми языковыми моделями MoE · оценка архитектуры с чередованием Gated DeltaNet и плотного внимания
Базовая разреженная MoE-модель Arcee AI для генерации текста, исследований предобучения и последующего дообучения.
Подходит для: исследование поведения языковой модели после масштабного предобучения · изучение маршрутизации и балансировки экспертов MoE · зондирование и интерпретируемость языковой модели
Производная модели CollectionStudio/Trinity-Large-TrueBase. Базовая разреженная MoE-модель Arcee AI для исследований предобучения, анализа поведения и последующего дообучения.
Подходит для: исследование поведения модели после масштабного предобучения · анализ маршрутизации экспертов и балансировки нагрузки в MoE · пробинг и интерпретируемость языковой модели
MMaDA-8B-Base — мультимодальная диффузионная модель LLaDA для текстовых рассуждений, понимания мультимодальных данных и генерации изображений по тексту.
Подходит для: ответы на вопросы по изображениям · описание и интерпретация визуального содержимого · генерация изображений по текстовому описанию
Индекс исследовательских контрольных точек Allen Institute for AI для изучения модульности в языковых моделях на архитектуре MoE.
Подходит для: изучение возникающей модульности в моделях смеси экспертов · сравнение обучения EMO и стандартного MoE · исследование диалоговой генерации текста на английском языке
Предобученная языковая MoE-модель AETHORIA-AI с детерминированной хеш-маршрутизацией для исследований архитектуры и продолжения обучения.
Подходит для: изучение детерминированной маршрутизации экспертов в языковых моделях · воспроизведение экспериментов по предобучению MoE · продолжение обучения на технических и агентно-ориентированных текстовых данных
MiniMax-M2.7 — разговорная MoE-модель для генерации текста, программирования, агентной автоматизации и многошаговых рабочих задач.
Подходит для: написание и отладка программного кода · анализ логов и поиск причин сбоев в системах · выполнение многошаговых задач с вызовом инструментов
Экспериментальная MoE-языковая модель Allen Institute for AI для генерации текста и исследования формирования модульности после предварительного обучения.
Подходит для: генерация продолжений текста на английском языке · эксперименты с диалоговой генерацией · исследование модульности в языковых моделях MoE
Мультимодальная модель Taimoor Siddiqui для программирования, анализа изображений и видео и работы с инструментами.
Подходит для: анализ скриншотов и изображений при работе с кодом · понимание видео в контексте программирования · ответы на вопросы по фрагментам кода
Квантизированная версия MADLAD-400-3B-MT на архитектуре T5 для машинного перевода между сотнями языков.
Подходит для: перевод текста между распространёнными языками · перевод на языки с ограниченными обучающими данными · многоязычный машинный перевод в исследовательских проектах
Компактная англоязычная MoE-модель для генерации текста и экспериментов на устройствах с ограниченными ресурсами.
Подходит для: эксперименты с разреженными языковыми моделями · генерация текста на английском языке · исследование маршрутизации между экспертами MoE
Промежуточная 34-миллиардная MoE-модель OpenMoE для генерации текста и изучения обучения архитектуры Mixture-of-Experts.
Подходит для: изучение динамики обучения MoE-моделей · эксперименты с архитектурой Mixture-of-Experts · генерация текста в исследовательских экспериментах
Исследовательский чекпойнт MoE-рецепта архитектуры Huginn для генерации текста и оценки подходов к зацикленным языковым моделям.
Подходит для: генерация текста для оценки исследовательского чекпойнта · воспроизведение протокола эксперимента из статьи · исследование архитектуры зацикленных языковых моделей
Англоязычная MoE-модель на основе LLaMA 2 для генерации текста с 16 экспертами, из которых активируются два.
Подходит для: генерация продолжений английского текста · эксперименты с архитектурами Mixture-of-Experts · сравнение языковых моделей в задачах генерации
Исследовательский контрольный MoE-чекпойнт AllenAI для генерации текста и изучения того, можно ли сформировать модульность после предварительного обучения.
Подходит для: воспроизведение эксперимента EMO-anneal · исследование модульности в Mixture-of-Experts · сравнение стандартного MoE с моделями, обученными по цели EMO
Производная модели Qwen/Qwen3.8-2.4T-A95B. Крупная текстовая MoE-модель Qwen для диалогов, программирования, исследований и многошаговых агентных задач.
Подходит для: написание и отладка кода · решение сложных задач в диалоге · исследовательский анализ и подготовка материалов
Экспериментальная языковая MoE-модель Huginn для генерации текста и изучения схемы подачи входа в средний блок циклической архитектуры.
Подходит для: генерация текста для оценки по протоколу статьи · эксперименты с циклическими языковыми моделями MoE · исследование подачи входа в средний блок модели
QMoE-400 — разреженная языковая модель для генерации текста и исследования эффективности архитектур смеси экспертов.
Подходит для: продолжение англоязычных текстов · эксперименты с разреженными MoE-архитектурами · изучение маршрутизации токенов между экспертами
Небольшая англоязычная MoE-модель, созданная с нуля для генерации текста, диалогов и изучения предобучения.
Подходит для: изучение влияния этапов предобучения на языковую модель · эксперименты с маршрутизацией экспертов MoE · тестирование генерации короткого текста на английском
Экспериментальная разреженная MoE-модель Mixtral для генерации текста и исследований рассуждений.
Подходит для: эксперименты с разреженностью MoE-моделей · генерация текста для задач рассуждения · оценка языковых моделей на задачах reasoning
Экспериментальная MoE-версия инструкционной LFM2.5-350M для генерации текста и диалоговых ответов с сокращённым числом активных параметров.
Подходит для: эксперименты с разреженной маршрутизацией экспертов в языковых моделях · генерация диалоговых ответов · оценка качества сжатия инструкционной языковой модели
Производная модели facebook/dinov3-vitl16-pretrain-lvd1689m. Визуальный ViT-L из семейства DINOv3 для извлечения признаков изображений и построения решений компьютерного зрения.
Подходит для: извлечение признаков изображений для классификации · поиск похожих изображений по эмбеддингам · семантическая сегментация изображений