Дообученная XLM-RoBERTa размечает каждое слово в смешанном тексте на Roman Urdu и английском меткой языка или смешанного токена.

Подходит для: определение языка каждого слова в сообщениях на Roman Urdu и английском · поиск переключений между Roman Urdu и английским в предложении · разметка смешанных токенов в код-свитчинговых текстах