Acquisition temps-réel de données articulatoires par IRM : application à la synthèse par copie

Benjamin Elie 1 Yves Laprie 1 Pierre-André Vuissoz 2
1 MULTISPEECH - Speech Modeling for Facilitating Oral-Based Communication
Inria Nancy - Grand Est, LORIA - NLPKD - Department of Natural Language Processing & Knowledge Discovery
Résumé : L'étude de la production de la parole nécessite de connaitre précisément l'évolution temporelle de la géométrie du conduit vocal. Récemment, l'imagerie par résonance magnétique (IRM) a été couramment utilisée car elle possède les avantages d'offrir une image des tissus internes avec un fort contraste, de sélectionner des coupes précises , tout en étant inoffensive pour les sujets. Toutefois, les contraintes sur le temps d'acquisition peuvent être un obstacle majeur pour l'acquisition en temps-réel des mouvements articulatoires rapides du fait d'une cadence d'acquisition trop faible. Cette étude présente une méthode permettant d' accélérer la cadence d'acquisition, jusqu'à obtenir 36 images par seconde, grâce à l'acquisition compressée (ou Compressed Sensing). En effet, en utilisant l'a priori d'une forte parcimonie de la transformée de Fourier temporelle de la séquence d'image, et en choisissant un par-cours adapté dans l'espace d'acquisition, il est alors possible de réduire considérablement le nombre d'observations dans l'espace d'acquisition, tout en garantissant une reconstruction satisfaisante de la séquence d'image pour leur post-traitement. Celui-ci est effectué a l'aide d'une reconnaissance des contours des différents articulateurs, ainsi que de l'utilisation d'un mod ele articulatoire adapté, ce qui permet alors d'extraire l'´ évolution temporelle des paramètres du modèle articulatoire, ainsi que les fonctions d'aire correspondantes. Nous montrons également que ces données peuvent alors servir de paramètres d' entrée de synthétiseurs acoustiques dans le but d'analyser le lien entre les mouvements articulatoires du locuteur et les indices acoustiques de la parole.
Liste complète des métadonnées

Cited literature [22 references]  Display  Hide  Download

https://hal.archives-ouvertes.fr/hal-01314313
Contributor : Benjamin Elie <>
Submitted on : Tuesday, June 21, 2016 - 5:03:10 PM
Last modification on : Tuesday, December 18, 2018 - 4:38:02 PM

File

000266.pdf
Publisher files allowed on an open archive

Identifiers

  • HAL Id : hal-01314313, version 2

Citation

Benjamin Elie, Yves Laprie, Pierre-André Vuissoz. Acquisition temps-réel de données articulatoires par IRM : application à la synthèse par copie. 13ème Congrès Français d'Acoustique (CFA 2016), SFA, Apr 2016, Le Mans, France. ⟨hal-01314313v2⟩

Share

Metrics

Record views

268

Files downloads

139