Разработка системы диаризации дикторов для отслеживания дикторов в аудиозаписях новостных радиопередач: тематическое исследование

Development of a Speaker Diarization System for Speaker Tracking in Audio Broadcast News: a Case Study
Janez Žibert, Boštjan Vesnicer, France Mihelič
2008-01-01

сегментация аудиоаудио новостных передачкластеризация дикторовдиаризация дикторовотслеживание дикторов
Представлена система отслеживания дикторов в аудиоданных новостных радиопередач и оценено влияние ее основных компонентов на общую эффективность отслеживания дикторов. Процесс отслеживания дикторов в непрерывных аудиопотоках включает несколько задач обработки и поэтому рассматривается как многоэтапный процесс. Основные блоки такой системы включают компоненты сегментации аудиосигнала, обнаружения речи, кластеризации дикторов и идентификации дикторов. Цель первых трех процессов заключается в выявлении однородных участков непрерывных аудиопотоков, относящихся к одному диктору, и объединении всех участков, принадлежащих одному и тому же диктору. Организация аудиоданных таким образом известна как диаризация дикторов и играет важную роль в различных приложениях обработки речи. В данном исследовании влияние диаризации дикторов оценивалось в системе отслеживания дикторов путем сравнительного анализа того, как каждый компонент влияет на общие результаты обнаружения дикторов. Эксперименты по оценке проводились на аудиоданных новостных радиопередач с использованием системы отслеживания дикторов, способной обнаруживать 41 целевого диктора. Для каждого компонента системы были реализованы несколько различных подходов, а их эффективность сравнивалась путем анализа итоговых результатов отслеживания дикторов. Результаты оценки свидетельствуют о важности компонентов сегментации аудиосигнала и обнаружения речи, тогда как дополнительное включение компонента кластеризации дикторов в систему отслеживания дикторов не обеспечило существенного улучшения общих результатов.
1
Разработана многоэтапная система отслеживания говорящих для непрерывного аудиоэфира новостей, объединяющая сегментацию, обнаружение речи, кластеризацию и идентификацию.
2
Добавление компонента кластеризации говорящих не обеспечило значимого улучшения общих результатов отслеживания.
3
Сегментация аудио и обнаружение речи существенно влияли на общую эффективность отслеживания говорящих и оказались важными компонентами системы.
4
Диаризация говорящих исследовалась посредством сравнительных экспериментов по влиянию отдельных компонентов в составе полной системы отслеживания.
5
Система оценивалась на аудиоданных новостных передач и была способна обнаруживать 41 целевого говорящего; для каждого компонента сравнивались различные подходы.

система отслеживания говорящих в непрерывных аудиопотоках вещательных новостей

влияние компонентов сегментации аудио, обнаружения речи и кластеризации говорящих на общую эффективность отслеживания говорящих

Publication Details
Publication Date
2008-01-01
Journal
Publisher
ISSN
Access Type
Author Information
Authors
Janez Žibert
Boštjan Vesnicer
France Mihelič
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%