ASR PERFORMANCE PREDICTION ON UNSEEN BROADCAST PROGRAMS USING CONVOLUTIONAL NEURAL NETWORKS

Zied Elloumi; Laurent Besacier; Olivier Galibert; Juliette Kahn; Benjamin Lecouteux

ASR PERFORMANCE PREDICTION ON UNSEEN BROADCAST PROGRAMS USING CONVOLUTIONAL NEURAL NETWORKS

Zied Elloumi ^{1, 2} Laurent Besacier ^{1, 3, 2} Olivier Galibert ⁴ Juliette Kahn ^{5, 4} Benjamin Lecouteux ^{1, 2}

1 GETALP - Groupe d’Étude en Traduction Automatique/Traitement Automatisé des Langues et de la Parole

LIG - Laboratoire d'Informatique de Grenoble

2 LIG - Laboratoire d'Informatique de Grenoble

3 IUF - Institut Universitaire de France

4 LNE - Laboratoire National de Métrologie et d'Essais [Trappes]

5 LCM - Laboratoire commun de métrologie LNE-CNAM

Abstract : In this paper, we address a relatively new task: prediction of ASR performance on unseen broadcast programs. We first propose an heterogenous French corpus dedicated to this task. Two prediction approaches are compared: a state-of-the-art performance prediction based on regression (engineered features) and a new strategy based on convolutional neural networks (learnt features). We particularly focus on the combination of both textual (ASR transcription) and signal inputs. While the joint use of textual and signal features did not work for the regression baseline, the combination of inputs for CNNs leads to the best WER prediction performance. We also show that our CNN prediction remarkably predicts the WER distribution on a collection of speech recordings.

Keywords : Convolutional Neural Networks Performance Prediction Large Vocabulary Continuous Speech Recognition

Type de document :

Communication dans un congrès

IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), Apr 2018, Calgary, Alberta, Canada

Domaine :

Informatique [cs] / Informatique et langage [cs.CL]

Liste complète des métadonnées

Littérature citée [25 références] Voir Masquer Télécharger

https://hal.archives-ouvertes.fr/hal-01709779
Contributeur : Laurent Besacier <>
Soumis le : jeudi 15 février 2018 - 11:43:02
Dernière modification le : lundi 11 février 2019 - 16:36:02
Document(s) archivé(s) le : dimanche 6 mai 2018 - 03:55:14

20180214040820_904429_2819.pdf

Fichiers produits par l'(les) auteur(s)

ASR PERFORMANCE PREDICTION ON UNSEEN BROADCAST PROGRAMS USING CONVOLUTIONAL NEURAL NETWORKS

Fichier

Identifiants

Collections

Citation

Exporter

Métriques

503

212

Contact

ASR PERFORMANCE PREDICTION ON UNSEEN BROADCAST PROGRAMS USING CONVOLUTIONAL NEURAL NETWORKS

Fichier

Identifiants

Collections

Citation

Exporter

Partager

Métriques

503

212

Contact