Extrinsic evaluation of French dependency parsers on a specialised corpus: comparison ofdistributional thesauri

Comparaison qualitative et extrinsèque d'analyseurs syntaxiques du français : confrontation de modèles distributionnels sur un corpus spécialisé

Ludovic Tanguy (1) , Pauline Brunet (2) , Olivier Ferret (2)

1 CLLE-ERSS - Cognition, Langues, Langage, Ergonomie
2 LIST (CEA) - Laboratoire d'Intégration des Systèmes et des Technologies

We present a study with the goal of comparing 11 different french dependency parsers applied on a specialised corpus (consisting of articles from the archives of the TALN conference). Due to the lack of a gold standard, we use each of the parsers' output to generate distributional thesauri using a frequency-based method. We compare these 11 thesauri in order to propose a first look at the impact of choosing to use a parser over another.

Nous présentons une étude visant à comparer 11 différents analyseurs en dépendances du français sur un corpus spécialisé (constitué des archives des articles de la conférence TALN). En l'absence de gold standard, nous utilisons chacune des sorties de ces analyseurs pour construire des thésaurus distributionnels en utilisant une méthode à base de fréquence. Nous comparons ces 11 thésaurus afin de proposer un premier aperçu de l'impact du choix d'un analyseur par rapport à un autre.

Mots clés: specialised corpus; distributional semantics; French dependency parsing

Mots clés: analyse syntaxique; domaine de spécialité; évaluation; analyse distributionnelle

Domaines: Informatique et langage [cs.CL]; Linguistique; Traitement du texte et du document

Ludovic Tanguy, Pauline Brunet, Olivier Ferret. Comparaison qualitative et extrinsèque d'analyseurs syntaxiques du français : confrontation de modèles distributionnels sur un corpus spécialisé. 26e conférence sur le Traitement Automatique des Langues Naturelles (TALN-2019) et 21e édition la conférence jeunes chercheur·euse·s RECITAL, Jul 2019, Toulouse, France. ⟨hal-02176602⟩