Ressource pédagogique : Estimation de la qualité d'un système de reconnaissance de la parole pour une tâche de compréhension

Informations pratiques sur cette ressource

Description de la ressource pédagogique

Description (résumé)

JEP-TALN-RECITAL 2016 - Mercredi 6 juillet 2016 Session commune JEP/TALN 2 Estimation de la qualité d'un système de reconnaissance de la parole pour une tâche de compréhension Olivier Galibert, Nathalie Camelin, Paul Deléglise and Sophie Rosset Résumé : Dans ce travail, nous nous intéressons à l'évaluation de la qualité des systèmes de reconnaissance de la parole étant donné une tâche de compréhension. L'objectif de ce travail est de pouvoir fournir un outil permettant la sélection d'un système de reconnaissance automatique de la parole le plus adapté pour un système de dialogue donné. Nous utilisons dans cette étude différentes métriques, notamment le WER, NE-WER, et ATENE métrique proposée récemment pour l'évaluation des systèmes de reconnaissance de la parole étant donné une tâche de reconnaissance d'entités nommées. Cette dernière métrique montrait une meilleure corrélation avec les résultats de la tâche globale que toutes les autres métriques testées. Nos mesures indiquent une très forte corrélation avec la mesure ATENE et une moins forte avec le WER.

"Domaine(s)" et indice(s) Dewey

• Informatique appliquée à la linguistique (410.285)

Thème(s)