Extraction de l'impact émotionnel des images

Syntyche Gbehounou (1) , François Lecellier (1) , Christine Fernandez-Maloigne (1)

1 XLIM-SIC - SIC

Cet article propose une méthode d'extraction de l'impact émotionnel des images à partir de descripteurs bas niveau. Nous avons émis l'hypothèse que la précision de ces derniers encoderait des informations haut niveau intéressantes voire discriminantes pour les émotions. Il n'existe à ce jour aucun descripteur particulièrement adapté à l'étude de l'impact émotionnel des images. Les émotions ressenties dépendent, en effet, de plusieurs informations dans l'image mais également de sa nature (très sémantique ou non) ou encore de la durée d'observation. Plus ce temps est long plus l'interprétation sémantique de l'image prend le dessus sur l'émotion " primaire ". À ces descripteurs nous avons associé deux classifieurs performants, particulièrement adaptés à des discriminations d'informations complexes. Il s'agit d'un réseau de neurones multicouche et d'un SVM dans son extension multiclasse basée sur la stratégie " un contre un ". Très souvent, on associe les émotions à l'expression du visage, mais nous avons décidé de ne pas faire de cette information la principale caractéristique émotionnelle des images naturelles, qui en général ne contiennent pas de visages. Nous avons, à cet effet, effectué nos tests sur une base diversifiée de 350 images, construite à partir d'images à faible contenu sémantique. Notre choix de descripteurs est basé sur des supposés liens entre les émotions et le contenu des images mais également sur la précision qu'offrent certains descripteurs de traitement d'images en indexation ou en catégorisation. La complexité des émotions a été prise en compte en intégrant, au processus de classification, les résultats de tests psychovisuels que nous avons mis en place. Nous avons défini trois classes d'émotions. Les taux de réussite moyens obtenus lors de la classification sont de 56,15 % pour le réseau de neurones et 55,25 % pour le SVM. Ces résultats sont encourageants au regard des résultats de la littérature. Ces tests confirment aussi l'hypothèse que les descripteurs choisis sont complémentaires dans notre processus d'extraction des émotions.

Domaines: Traitement du signal et de l'image [eess.SP]; Traitement du signal et de l'image [eess.SP]

Syntyche Gbehounou, François Lecellier, Christine Fernandez-Maloigne. Extraction de l'impact émotionnel des images. Traitement de Signal, 2012, pp.409-432. ⟨hal-00863786⟩