Adapter les moteurs de recherche aux besoins en information - Prise en compte de la difficulté du besoin

Anthony Bigot (1)

1 IRIT-SIG - Systèmes d’Informations Généralisées

Les campagnes telles que Text REtrieval Conference (TREC) offrent un cadre qui permet d'évaluer des systèmes de recherche d'information (RI). L'évaluation utilise des mesures qui se basent sur une moyenne des résultats obtenus pour un ensemble de besoins en information: les succès et échecs sur chacun des besoins sont masqués. Cet article propose une analyse qui prend en compte la diversité des résultats et qui a pour but de sélectionner le système de RI le plus apte à traiter les besoins selon leur difficulté. Deux méthodes de sélection des meilleurs systèmes de RI sont proposées. La première méthode considère la moyenne des mesures de performance des systèmes et la seconde considère leurs rangs selon cette moyenne. Une expérimentation est conduite afin de sélectionner les meilleurs systèmes selon la difficulté des besoins en information. L'évaluation montre un gain maximal en robustesse de 68% et de 10% sur les performances.

Mots clés: Evaluation en recherche d'information; Rang des systèmes; Difficulté des besoins; Classifications

Domaines: Théorie de l'information [cs.IT]; Recherche d'information [cs.IR]

Anthony Bigot. Adapter les moteurs de recherche aux besoins en information - Prise en compte de la difficulté du besoin. INFormatique des Organisations et Systemes d'Information et de Decision - INFORSID 2013, May 2013, Paris, France. pp. 59-74. ⟨hal-01140620⟩