Дообученная модель T5 на базе VietAI/vit5-large с неописанными в карточке целями и сценариями применения.

Речевая языковая модель из исследования EMNLP 2024, генерирующая дискретные единицы речи для экспериментов и последующего декодирования внешним вокодером.

Подходит для: генерация последовательностей дискретных речевых единиц · эксперименты по масштабированию речевых языковых моделей · оценка речевых языковых моделей на тестах sBLIMP

Исследовательская TransformerLM-модель на 85 млн параметров, предсказывающая дискретные речевые единицы mHuBERT для изучения масштабирования речевых языковых моделей.

Подходит для: предсказание следующих дискретных речевых единиц mHuBERT · эксперименты с закономерностями масштабирования языковых моделей речи · оценка согласованности речевых последовательностей на тестах sBLIMP

Плотный TransformerLM на 309 млн параметров для генерации дискретных речевых токенов и экспериментов по масштабированию речевых языковых моделей.

Подходит для: генерация продолжений последовательностей речевых токенов mHuBERT · оценка языковых закономерностей в речи на sBLIMP · исследование связи масштаба модели и качества речевых языковых моделей

Исследовательская Transformer-модель, генерирующая дискретные речевые токены для экспериментов с речевыми языковыми моделями.

Подходит для: генерация последовательностей дискретных речевых токенов · оценка речевых языковых моделей на тестах sBLIMP и StoryCloze · исследование влияния масштаба модели на генерацию речевых токенов

Исследовательская TransformerLM на 823 млн параметров для генерации токенизированных речевых последовательностей и экспериментов с масштабированием SLM.

Подходит для: генерация последовательностей речевых токенов mHuBERT · исследование масштабирования языковых моделей речи · оценка языковых закономерностей в представлениях речи

Экспериментальная речевая языковая модель на 309 млн параметров для предсказания дискретных единиц речи в исследованиях масштабирования.

Подходит для: генерация продолжения последовательности дискретных речевых токенов · оценка языковых закономерностей в речевых представлениях · эксперименты по масштабированию речевых языковых моделей

Исследовательская модель на 155 млн параметров, генерирующая дискретные речевые токены для изучения свойств масштабирования речевых языковых моделей.

Подходит для: генерация продолжений последовательностей речевых токенов · эксперименты с масштабированием речевых языковых моделей · оценка языковых закономерностей в дискретных представлениях речи

Исследовательская TransformerLM на 85 млн параметров для генерации дискретных речевых единиц и изучения масштабирования речевых языковых моделей.

Подходит для: генерация последовательностей дискретных речевых единиц · эксперименты с масштабированием speech language models · оценка языковых закономерностей в речевых последовательностях

Исследовательская Transformer-модель генерирует дискретные речевые токены для экспериментов с масштабированием речевых языковых моделей.

Подходит для: генерация дискретных токенов речи по токенному промпту · исследование влияния объёма обучения на качество речевых языковых моделей · оценка на тестах грамматической приемлемости и завершения историй по речи

Экспериментальная TransformerLM предсказывает дискретные речевые единицы mHuBERT и предназначена для исследований масштабирования речевых языковых моделей.

Подходит для: исследование масштабирования моделей, генерирующих речевые токены · генерация продолжения последовательности токенов mHuBERT · оценка языковых закономерностей в дискретных представлениях речи

Экспериментальная трансформерная модель SLM на 155 млн параметров, генерирующая дискретные речевые токены для исследования масштабирования речевых языковых моделей.

Подходит для: генерация последовательностей дискретных речевых токенов · исследование влияния масштаба обучения на речевые языковые модели · оценка языковых закономерностей в речевых токенах на sBLIMP

Исследовательская Transformer-модель на 309 млн параметров для генерации дискретных речевых токенов и изучения масштабирования речевых языковых моделей.

Подходит для: продолжение последовательности дискретных речевых токенов · эксперименты с масштабированием речевых языковых моделей · оценка моделей на тестах грамматичности и понимания историй

Исследовательская речевая языковая модель на 309 млн параметров, генерирующая дискретные mHuBERT-единицы для экспериментов с речевыми последовательностями.

Подходит для: генерация последовательностей дискретных речевых единиц · исследование масштабирования речевых языковых моделей · оценка языковых закономерностей в речевых токенах

Экспериментальный чекпойнт TransformerLM на 309 млн параметров для генерации дискретных токенов речи и исследования масштабирования речевых языковых моделей.

Подходит для: генерация последовательностей дискретных речевых единиц · оценка речевых языковых моделей на sBLIMP · оценка понимания речевых историй на sStoryCloze и tStoryCloze

Исследовательская трансформерная модель для авторегрессионного предсказания дискретных речевых единиц и изучения масштабирования речевых языковых моделей.

Подходит для: генерация последовательностей дискретных единиц mHuBERT · исследование влияния масштаба обучения на речевые языковые модели · оценка речевого моделирования на sBLIMP

Исследовательская Transformer-модель на 85 млн параметров для предсказания дискретных акустических токенов речи.

Подходит для: генерация последовательностей дискретных речевых токенов · эксперименты с масштабированием языковых моделей для речи · оценка моделей на речевых тестах sBLIMP и StoryCloze

Плотная TransformerLM-модель на 85 млн параметров для генерации речевых единиц mHuBERT и исследования масштабирования речевых языковых моделей.

Подходит для: генерация последовательностей речевых единиц mHuBERT · исследование влияния объёма обучения на качество речевой языковой модели · оценка речевых моделей на sBLIMP и StoryCloze

Компактная речевая языковая модель, генерирующая дискретные mHuBERT-единицы для исследовательских экспериментов по масштабированию моделей речи.

Подходит для: генерация последовательностей дискретных речевых токенов · эксперименты с масштабированием речевых языковых моделей · оценка моделей на заданиях sBLIMP и sStoryCloze

Исследовательская авторегрессионная модель GSLM на 155 млн параметров для генерации дискретных единиц речи и экспериментов с речевыми языковыми моделями.

Подходит для: генерация последовательностей дискретных речевых единиц · эксперименты с масштабированием речевых языковых моделей · оценка речевых моделей на тестах грамматических явлений

Исследовательская трансформерная модель генерирует последовательности речевых токенов для экспериментов с языковыми моделями речи.

Подходит для: генерация последовательностей акустических токенов · эксперименты с масштабированием speech language models · оценка языкового моделирования речевых токенов

Компактная TransformerLM-модель для предсказания и генерации токенизированных последовательностей речи в экспериментах по масштабированию speech-language-моделей.

Подходит для: генерация последовательностей акустических токенов · эксперименты с масштабированием языковых моделей для речи · оценка согласованности речевых представлений на sBLIMP

Исследовательская TransformerLM-модель на 20,7 млн параметров, которая предсказывает дискретные речевые токены для изучения масштабирования языковых моделей речи.

Подходит для: генерация последовательностей дискретных речевых токенов · исследование масштабирования языковых моделей речи · оценка речевых языковых моделей на sBLIMP и sStoryCloze

Компактная Transformer-модель для предсказания токенизированных речевых последовательностей и экспериментов с масштабированием речевых языковых моделей.

Подходит для: генерация последовательностей речевых токенов · эксперименты с масштабированием языковых моделей речи · оценка языковых закономерностей в последовательностях mHuBERT