Formalisation de la sémantique des langages iconiques

Jean-Baptiste F Lamy (1) , Lina F. Soualmia (1, 2, 3) , Catherine F Duclos (1) , Alain F Venot (1)

1 LIMICS - Laboratoire d'Informatique Médicale et Ingénierie des Connaissances en e-Santé
2 LITIS - Laboratoire d'Informatique, de Traitement de l'Information et des Systèmes
3 CISMeF

Iconic languages can represent concepts by the combination of graphical primitives (such as colors or pictograms). There are numerous examples, from traffic signs to computer user interface icons. However, these languages do not associate semantics to their icons, which raises various problems: inconsistent combinations of graphical primitives, different interpretations of a given icon by two persons, difficulties to map the icons with the concepts of existing termino-ontological resources... In this article, we propose a method for formalizing the semantics of an iconic language with an ontology. This method was initially developed for the VCM iconic language (Visualization of Concepts in Medicine), which enables to represent the main medical concepts (antecedents, disorders, treatments...) by icons. We show that this method is generalizable to other iconic languages by applying it to traffic signs. Four applications are described : the verification of icons consistency, the semi-automatic alignment with a medical terminology, the generation of a pictogram lexicon and the generation of icon labels.

Les langages iconiques permettent de représenter des concepts par la combinaison de primitives graphiques (couleurs, pictogrammes...). Les exemples sont nombreux, des pan-neaux routiers aux icônes des interfaces utilisateur. Cependant, ces langages n'associent pas de sémantique logique à leurs icônes, ce qui peut poser divers problèmes : des combinaisons inconsistantes de primitives graphiques, des interprétations différentes d'une même icône par deux personnes, des difficultés à mettre en correspondance les icônes avec des concepts de ressources termino-ontologiques existantes... Dans cet article, nous proposons une méthode de formalisation de la sémantique d'un lan-gage iconique à l'aide d'une ontologie. Cette méthode a initialement été développée pour le langage iconique VCM (Visualisation des Concepts en Médecine), qui permet de représenter par des icônes les principaux concepts médicaux (antécédents, maladies, traitements...). Nous montrons que cette méthode est généralisable à d'autres langages iconiques en l'appliquant à la signalisation routière. Nous décrivons quatre applications de la formalisation du langage : la vérification de la consistance des icônes constituées, l'alignement semi-automatique des icônes avec une terminologie médicale, la génération d'un lexique des pictogrammes et la génération de libellés pour les icônes.

Mots clés: icons; iconic language; semantics; alignment; medicine

Mots clés: alignement; ontologies; sémantique; langage iconique; icônes; médecine

Domaines: Intelligence artificielle [cs.AI]; Santé publique et épidémiologie; Interface homme-machine [cs.HC]

Jean-Baptiste F Lamy, Lina F. Soualmia, Catherine F Duclos, Alain F Venot. Formalisation de la sémantique des langages iconiques : Méthode à base d'ontologie et applications. Revue des Sciences et Technologies de l'Information - Série RIA : Revue d'Intelligence Artificielle, 2016, 30 (5), pp.579-606. ⟨10.3166/RIA.30.579-606⟩. ⟨hal-01574366⟩