code-switching-codesaviours-si26-sumair
Sumair-Parveiz·Разметка токенов
Модель размечает токены в смешанном тексте на Roman Urdu и английском, определяя урду, английские и гибридные токены.
Подходит для: определение языка каждого токена в тексте на Roman Urdu и английском · анализ переключения между урду и английским · поиск и разметка гибридных или локализованных слов
Загрузки на Hugging Face · 8Лайки · 0Контекст · 514 токеновВыход на Hugging Face · 13 авг 2026