ChuckleNet v2 объединяет признаки WavLM и просодические характеристики для классификации речевых фрагментов по наличию смеха.
Подходит для: поиск фрагментов со смехом в записях стендап-выступлений · анализ смеха в аудио выступлений и презентаций · исследовательская оценка детекторов смеха на сегментном уровне
Исследовательская модель на WavLM для обнаружения смеха в аудио стендап-выступлений по слабым меткам из субтитров.
Подходит для: поиск вероятных эпизодов смеха в записях стендапа · изучение связи просодии и комедийного тайминга · сопоставление аудиосигнала с маркерами смеха в субтитрах
Дообученная на аудио стендап-выступлений модель обнаруживает события смеха, используя речевые и просодические признаки.
Подходит для: разметка моментов смеха в аудио стендап-выступлений · анализ реакции аудитории на шутки · поиск фрагментов со смехом в записях комедийных шоу
ChuckleNet обнаруживает и отмечает временными метками эпизоды смеха в аудио стендап-комедии.
Подходит для: Поиск моментов, вызывающих смех, в записях стендап-выступлений · Ранжирование фрагментов стендапа по интенсивности реакции зрителей · Автоматический отбор фрагментов для комедийных подборок
Экспериментальная модель на базе WavLM для классификации аудиофрагментов и обнаружения признаков смеха в стендап-записях.
Подходит для: учебная демонстрация линейного пробинга признаков WavLM · эксперименты по обнаружению смеха в стендап-аудио · анализ связи акустических признаков с маркерами смеха в VTT-транскриптах
Модель на базе WavLM выявляет и оценивает вероятность смеха в коротких аудиоокнах, прежде всего в записях англоязычного стендапа.
Подходит для: поиск моментов смеха в аудиозаписи стендап-выступления · оценка вероятности смеха по коротким фрагментам аудио · разметка временных интервалов смеха в видеозаписи по звуковой дорожке
Компактная мультимодальная модель оценивает силу юмора в фрагментах речи по аудио, текстовым и просодическим признакам.
Подходит для: оценка юмористичности фрагментов стендапа · поиск смешных моментов в подкастах и видеоклипах · сортировка комедийных аудиофрагментов по силе юмора