GlotLID — модель fastText для определения языка текста среди более чем 2100 меток, включая варианты письменности.

Подходит для: определение языка входящего текста · маршрутизация сообщений в многоязычной системе · разметка языков в текстовом корпусе

Многоязычная XLM-RoBERTa-модель, предварительно обученная на 500 и более языках для предсказания замаскированных токенов в тексте.

Подходит для: восстановление пропущенных слов в многоязычном тексте · подстановка наиболее вероятных слов в предложение · анализ контекста замаскированного токена

Компактная гибридная LFM2.5-модель для генерации пошаговых решений STEM-задач и ответов на задачи логического вывода при локальном запуске.

Подходит для: пошаговое решение задач по линейной алгебре · объяснение задач по дифференциальным уравнениям · решение задач по электромагнетизму и классической механике

AICrossSim/clm-200m — ағылшынша мәтін жалғастыру және диалог құруға арналған 224,1 млн параметрлі Llama тіл моделі.

Подходит для: ағылшын мәтінін жалғастыру · ағылшын тілінде диалогтық жауаптар жасау · оқу мәтіндерінің жалғасын құрастыру

Китайско-ориентированная Llama-модель на 1,9 млрд параметров для генерации текста и академического изучения языковых возможностей и смещений.

Подходит для: генерация текста на китайском языке · исследование языковых смещений модели · изучение многоязычной адаптивности LLM

Компактная аблированная версия LiquidAI/LFM2.5-350M для исследований поведения отказов, red teaming и оценки защит языковых моделей.

Подходит для: исследование механизмов отказа языковой модели · проверка устойчивости защит на вредоносных запросах · red teaming диалоговой языковой модели

Базовая гибридная языковая модель SILX AI на 3 млрд параметров для дистилляции знаний, экспериментов с длинным контекстом и разработки систем с постоянной памятью.

Подходит для: дистилляция знаний из Qwen или GLM в распределённой подсети Bittensor SN24 · исследование архитектур языковых моделей с длинным контекстом · создание прототипов диалоговых агентных систем с постоянной памятью

Открытая базовая модель HPLT на 13 млрд параметров для генерации текста на норвежском и скандинавских языках, дообученная продолжением предобучения OLMo 2.

Подходит для: генерация и продолжение текстов на букмоле · генерация текстов на нюношке · создание текстов на скандинавских языках

safetensors: формат, квантизация, runtime и память принадлежат одному artifact

Компактный многоязычный энкодер ModernBERT для заполнения пропусков, анализа текста и получения контекстных представлений, особенно для финского языка.

Подходит для: предсказание пропущенных слов в финском тексте · предсказание пропущенных слов в шведском и английском тексте · извлечение контекстных представлений токенов

Энкодер ModernBERT для заполнения маски и получения представлений многоязычного текста, особенно на финском, шведском и северносаамском языках.

Подходит для: заполнение пропущенных слов в финском тексте · получение контекстных представлений финских и шведских текстов · поиск релевантных документов вне обучающего домена

Небольшая GPT-2-модель для генерации текста на урду в арабской письменности и экспериментов с низкоресурсными языками.

Подходит для: генерация продолжения текста на урду · эксперименты с языковым моделированием для урду · сравнение качества моделей для низкоресурсных языков

Небольшая GPT-2-модель для генерации текста на дари арабским письмом и исследований низкоресурсных языков.

Подходит для: генерация текста на дари · продолжение текста на дари · эксперименты с языковыми моделями для дари

Небольшая GPT-2-модель Goldfish для генерации текста на шотландском гэльском языке в латинской графике, обученная на низкоресурсном корпусе.

Подходит для: продолжение текста на шотландском гэльском языке · генерация коротких фрагментов на шотландском гэльском · исследование языкового моделирования для низкоресурсного гэльского

Компактная GPT-2-модель Goldfish для генерации стандартного малайского текста латиницей и исследований языкового моделирования малоресурсных языков.

Подходит для: продолжение текста на стандартном малайском языке · генерация коротких текстов на малайском латиницей · исследование языкового моделирования для малоресурсного языка

Компактная GPT-2-модель для генерации текста на фиджийском языке латинским письмом.

Подходит для: генерация текста на фиджийском языке · эксперименты с языковыми моделями для малоресурсных языков · сравнение генерации текста между языками

Небольшая GPT-2-модель Goldfish генерирует текст на дари арабским письмом и предназначена для исследований низкоресурсного языка.

Подходит для: генерация продолжения текста на дари · эксперименты с языковыми моделями для дари · сравнение качества моделей для низкоресурсных языков

Компактная модель GPT-2 для генерации текста на панджаби письмом гурмукхи, обученная в рамках набора Goldfish для исследований низкоресурсных языков.

Подходит для: генерация коротких текстов на панджаби письмом гурмукхи · эксперименты с языковыми моделями для низкоресурсных языков · сравнение моделей для разных языков при малом объёме обучающих данных

Дообученная многоязычная XLM-RoBERTa-модель для классификации токенов, вероятно предназначенная для морфологической разметки текста.

Подходит для: морфологическая разметка текста по токенам · классификация слов и токенов в предложениях

Авторегрессионная модель GPT-2 для генерации текста на грузинском языке, обученная в рамках набора Goldfish для низкоресурсных языков и межъязыковых сравнений.

Подходит для: генерация текста на грузинском языке · продолжение грузинского текста · исследование языковых моделей для низкоресурсных языков

Многоязычный классификатор на базе XLM-RoBERTa определяет положительную, отрицательную или нейтральную тональность коротких публикаций в социальных сетях.

Подходит для: Определение тональности коротких постов и твитов · Мониторинг общественной реакции на тему в соцсетях · Классификация отзывов на позитивные, негативные и нейтральные

Дообученная многоязычная XLM-RoBERTa-модель для классификации токенов в тексте.

Подходит для: классификация токенов в многоязычном тексте

Многоязычная модель XLM-RoBERTa для бинарного определения токсичности текста на 15 языках.

Подходит для: Фильтрация токсичных сообщений в пользовательских чатах · Модерация комментариев и публикаций · Разметка токсичности в многоязычных текстовых корпусах

Одноязычная GPT-2 модель для генерации текста на валлийском языке в латинской письменности.

Подходит для: генерация продолжений текста на валлийском языке · эксперименты с языковым моделированием для валлийского · сравнение языковых моделей для малоресурсных языков