Analyse des différentes facettes influant sur la fidélité de l'épreuve d'expression écrite d'un test de français langue étrangère

Dominque Casanova (1) , Marc Demeuse (1)

1 INAS - Institut d'Administration scolaire

Quality control of written productions in French as a foreign language is a tricky issue, especially when the test is used to make high stakes decisions. This paper shows the complementarity of the generalizability theory and the many-facets Rasch model in order to identify and to estimate the size of the different sources of error in a quality monitoring process.

Le contrôle de la qualité des évaluations des productions écrites en français langue étrangère pose de nombreuses questions, encore amplifiées lorsqu'il s'agit de tests à forts enjeux pour les candidats. Cet article illustre comment ce contrôle peut s'appuyer à la fois sur la théorie de la généralisabilité et sur le modèle multi-facettes de Rasch pour identifier les sources d'erreur (stabilité inter- et intra-correcteurs, variation des stimuli fournis aux candidats pour produire leurs textes...) et en estimer l'importance respective dans le cadre d'un monitorage de la qualité d'une épreuve de français langue étrangère.

Mots clés: High stakes language tests; written production; French as foreign language; reliability; generalizability theory; many-facets Rasch model; quality monitoring

Mots clés: Tests linguistiques à forts enjeux; expression écrite; français langue étrangère; fidélité; théorie de la généralisabilité; modèle multi-facettes de Rasch; contrôle de la qualité

Domaines: Education

Dominque Casanova, Marc Demeuse. Analyse des différentes facettes influant sur la fidélité de l'épreuve d'expression écrite d'un test de français langue étrangère. Mesure et Evaluation en Education, 2011, 34 (1), pp.25-53. ⟨hal-00722918⟩