Exploration libre de vidéos : influence du son sur les mouvements oculaires consécutifs à un événement sonore saillant - Archive ouverte HAL Accéder directement au contenu
Communication Dans Un Congrès Année : 2012

Exploration libre de vidéos : influence du son sur les mouvements oculaires consécutifs à un événement sonore saillant

Résumé

Dans cette étude, nous utilisons un modèle de saillance sonore (le Discrete Energy Separation Algorithm), capable de détecter automatiquement les événements sonores saillants des bande-son accompagnant des vidéos, pour analyser l'effet du son sur les mouvements oculaires de participants explorant des vidéos. Ce modèle est basé sur une analyse multifréquentielle d'attributs élémentaires, tels l'amplitude et la fréquence moyennes instantanées ainsi que l'énergie de Teager-Kaiser. Les modulations de ces attributs sont combinées linéairement afin de donner une courbe de saillance sonore en fonction du temps. Son seuillage permet de repérer les événements sonores les plus susceptibles d'attirer l'attention. Nous comparons les paramètres des mouvements oculaires (dispersion, amplitude, durée, fréquence) de participants ayant vu les vidéos avec et sans leur bande sonore associée. sur les vidéos étudiées la présence du son modifie certains paramètres étudiés. Cependant cette différence n'est pas plus marquée sur les quelques trames suivant les événements sonores saillants repérés par le modèle qu'en moyenne sur l'ensemble des trames de la vidéo. Ceci laisse à penser que le regard n'est que peu influencé par les attributs élémentaires sonores considérés, du moins sur la base de vidéos étudiées et lorsque l'on s'intéresse à des extraits de courte durée.
Fichier principal
Vignette du fichier
coresa2012.pdf (1.77 Mo) Télécharger le fichier
Origine : Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

hal-00704448 , version 1 (05-06-2012)

Identifiants

  • HAL Id : hal-00704448 , version 1

Citer

Antoine Coutrot, Gelu Ionescu, Nathalie Guyader, Alice Caplier. Exploration libre de vidéos : influence du son sur les mouvements oculaires consécutifs à un événement sonore saillant. CORESA 2012 - 15èmes Journées d´Etudes et d´Echanges COmpression et REprésentation des Signaux Audiovisuels, May 2012, Lille, France. pp.62-67. ⟨hal-00704448⟩
199 Consultations
110 Téléchargements

Partager

Gmail Facebook X LinkedIn More