La mesure des compétences lexicales : effets des instruments utilisés - article ; n°3 ; vol.92, pg 365-392

Thiébaut

Description

L'année psychologique - Année 1992 - Volume 92 - Numéro 3 - Pages 365-392
Résumé
Des épreuves lexicales différentes mesurent-elles les mêmes compétences ? L'expérience rapportée compare huit épreuves résultant de la combinaison de trois facteurs dichotomiques : 1° guidage de la réponse (QCM vs réponses libres) ; 2° type d'activité langagière (fonctionnelle vs méta-linguistique) ; 3° type de réponse (un mot vs une phrase). Les épreuves portent sur un même échantillon de mots. Le plan expérimental croise les trois facteurs de tâche avec le niveau scolaire (CM2 et 5e) et l'origine sociale des sujets (N = 320). Les résultats montrent que les facteurs de tâche font significativement varier la moyenne des scores, la différence de performance entre groupes sociaux, l'ordre de difficulté des items et la corrélation avec une épreuve de lecture et une épreuve non verbale de raisonnement analogique. Les deux premiers facteurs influent davantage sur les résultats que le troisième. Les épreuves lexicales ne sont donc pas interchangeables.
Mots clés : épreuves lexicales, reconnaissance de mots, lexique interne, psycholinguistique, psychométrie.
Summary : The measurement of lexical abilities : Effects of assessment instruments.
Do different lexical tests measure the same lexical abilities ? The experiment described here compares eight tests based on the combination of three dichotomous factors : 1° response assistance (multiple-choice items vs free-response items) ; 2° type of linguistic activity (functional vs metalinguistic) ; 3° response type (word vs sentence). The same word sample is used in each test. The experimental design correlates task factors with grade (5th and 7th grade) and sociocultural membership of subjects (N = 320). The results show that task factors significantly affect mean scores, variation of performance between social groups, the rank of item difflculty and cor-relations with a reading test and a non verbal analogical reasoning task. The two first factors appear more important than the third. Lexical tests therefore are not interchangeable.
Key-words : lexical tests, word recognition, word knowledge assessment, internai lexicon, psycholinguistics, psychometrics.
28 pages
Source : Persée ; Ministère de la jeunesse, de l’éducation nationale et de la recherche, Direction de l’enseignement supérieur, Sous-direction des bibliothèques et de la documentation.

Informations

• Publié par: L-annee-psychologique
• Publié le: 01 janvier 1992
• Nombre de lectures: 24
• Langue: Français
• Poids de l'ouvrage: 1 Mo

Extrait

André Flieller
Pascal Delesmont
Eric Thiébaut
La mesure des compétences lexicales : effets des instruments
utilisés
In: L'année psychologique. 1992 vol. 92, n°3. pp. 365-392.
Résumé
Des épreuves lexicales différentes mesurent-elles les mêmes compétences ? L'expérience rapportée compare huit épreuves
résultant de la combinaison de trois facteurs dichotomiques : 1° guidage de la réponse (QCM vs réponses libres) ; 2° type
d'activité langagière (fonctionnelle vs méta-linguistique) ; 3° type de réponse (un mot vs une phrase). Les épreuves portent sur
un même échantillon de mots. Le plan expérimental croise les trois facteurs de tâche avec le niveau scolaire (CM2 et 5e) et
l'origine sociale des sujets (N = 320). Les résultats montrent que les de tâche font significativement varier la moyenne
des scores, la différence de performance entre groupes sociaux, l'ordre de difficulté des items et la corrélation avec une épreuve
de lecture et une épreuve non verbale de raisonnement analogique. Les deux premiers facteurs influent davantage sur les
résultats que le troisième. Les épreuves lexicales ne sont donc pas interchangeables.
Mots clés : épreuves lexicales, reconnaissance de mots, lexique interne, psycholinguistique, psychométrie.
Abstract
Summary : The measurement of lexical abilities : Effects of assessment instruments.
Do different lexical tests measure the same lexical abilities ? The experiment described here compares eight tests based on the
combination of three dichotomous factors : 1° response assistance (multiple-choice items vs free-response items) ; 2° type of
linguistic activity (functional vs metalinguistic) ; 3° response type (word vs sentence). The same word sample is used in each test.
The experimental design correlates task factors with grade (5th and 7th grade) and sociocultural membership of subjects (N =
320). The results show that task factors significantly affect mean scores, variation of performance between social groups, the
rank of item difflculty and cor-relations with a reading test and a non verbal analogical reasoning task. The two first factors appear
more important than the third. Lexical tests therefore are not interchangeable.
Key-words : lexical tests, word recognition, word knowledge assessment, internai lexicon, psycholinguistics, psychometrics.
Citer ce document / Cite this document :
Flieller André, Delesmont Pascal, Thiébaut Eric. La mesure des compétences lexicales : effets des instruments utilisés. In:
L'année psychologique. 1992 vol. 92, n°3. pp. 365-392.
doi : 10.3406/psy.1992.29520
http://www.persee.fr/web/revues/home/prescript/article/psy_0003-5033_1992_num_92_3_29520L'Année Psychologique, 1992, 92, 365-392
Laboratoire de Psychologie
Université de Nancy II1 *
LA MESURE DES COMPÉTENCES LEXICALES :
EFFETS DES INSTRUMENTS UTILISÉS
par André Flieller*, Pascal Delesmont
et Eric Thiébaut
SUMMARY : The measurement of lexical abilities : Effects of assessment
instruments.
Do different lexical tests measure the same lexical abilities ? The experi
ment described here compares eight tests based on the combination of three
dichotomous factors : 1° response assistance (multiple-choice items vs free-
response items) ; 2° type of linguistic activity (functional vs metaling
uistic) ; 3° response type (word vs sentence) . The same word sample is
used in each test. The experimental design correlates task factors with grade
(5th and 7th grade) and sociocultural membership of subjects (N = 320).
The results show that task factors significantly affect mean scores, variation
of performance between social groups, the rank of item difficulty and cor
relations with a reading test and a non verbal analogical reasoning task.
The two first factors appear more important than the third. Lexical tests
therefore are not interchangeable.
Key-words : lexical tests, word recognition, word knowledge assessment,
internal lexicon, psycholinguistics, psychometrics.
Par « compétence lexicale », Ehrlich, Bramaud du Boucheron
et Florin (1978, p. 24) désignent la connaissance de la signification
des mots. Nous utiliserons cette expression dans le même sens
que ces auteurs, mais, comme Arnaud (1987, p. 217), nous
emploierons le pluriel. En effet, nous tenterons de montrer dans
]. Unité de Recherche sur les Processus cognitifs e(, psychosociaux,
bp 33-97, 54015 Nancy cedex. 366 A. Flieller, P. Delesmont el E. Thiébaul
cet article que des instruments d'évaluation différents mobilisent
des connaissances sémantiques différentes et aboutissent à des
résultats différents.
La mesure des compétences lexicales des sujets intervient
dans divers champs de la recherche psychologique ; la psycliulugie
cognitive, ia psychologie développementale, la psychologie diffé
rentielle sont particulièrement consernées. Les instruments
utilisés sont très variables. Arnauld (1987) indique quelques
facteurs de différenciation : le type de stimuli (verbaux ou pictu
raux), la présence ou l'absence de contexte, le type d'activité
sollicité (compréhension ou production), la relation sémantique
entre stimuli et réponses (synonymie, définition, etc.), le type
de réponses (ouvertes ou contraintes). Or, malgré cette grande
diversité, les auteurs qui, comme Ehrlich et al. (1978), Anderson
et Freebody (1981), ou Rondal et Seron (1982), s'interrogent
sur les conséquences des différences entre les épreuves sont
étonnamment peu nombreux. Gomme l'observe Arnauld, « le
choix du type d'épreuve retenu n'est jamais justifié » (p. 258) ;
des considérations pratiques semblent y présider seules. Les
instruments d'évaluation apparaissent dans la littérature comme
interchangeables. La recherche présentée ici constitue une mise
à l'épreuve de ce postulat d'équivalence.
La non-équivalence de deux instruments construits à partir
d'un même échantillon de mots peut se manifester de plusieurs
manières. On peut constater une différence dans : 1° la moyenne
des scores ; 2° l'échelonnement des sujets ; 3° l'ordre des items ;
4° la corrélation avec une autre épreuve. Chacune de ces diff
érences est à considérer en propre : elles ne sont pas redondantes
et leurs conséquences ne sont pas les mêmes suivant les recherches.
L'indépendance des quatre types d'information peut être
montrée par une analyse théorique. Par exemple, l'indépendance
des différences 1 et 2 tient au fait que la valeur d'une corrélation
ne dépend pas de celle des moyennes des distributions marginales.
Les divers types de différences inter-épreuves ont une importance
qui varie selon la recherche considérée. Dans une recherche
génétique sur l'étendue du lexique à divers niveaux d'âge, la
moyenne constitue le paramètre essentiel, puisque les résultats
en dépendent directement. Elle peut être négligée dans une
recherche différentielle, où l'intérêt se porte surtout sur l'éch
elonnement des sujets et les corrélations entre les épreuves lexi
cales et d'autres tâches. Dans une recherche de psychologie des compétences lexicales 367 Mesure
cognitive où une hypothèse sur la difficulté relative de certains
mots est posée, la variable fondamentale est l'ordre des items.
Celui-ci dépend des caractéristiques des mots échantillonnés
(prononciabilité, disponibilité, degré de typicalité du concept
signifié, valeur associative, etc.), parmi lesquelles la fréquence
d'usage et la concrétude semblent les plus importantes (Flieller,
Richaume et Robert, 1991). Mais les caractéristiques de la tâche
sont également susceptibles de le modifier, ainsi que nous le
montrerons plus loin.
La présente recherche porte sur ces quatre formes de non-
équivalence. Pour la deuxième toutefois, en raison des contraintes
imposées par le plan expérimental, nous nous limiterons aux
éventuelles variations d'une différence entre deux groupes de
sujets distingués par leur origine sociale.
Notre objectif n'est pas simplement de montrer que des
épreuves lexicales différentes conduisent à des résultats diffé
rents ; il est d'essayer de comprendre comment les caractéris
tiques de celles-ci peuvent modifier les mesures pratiquées. Il en
découle que les caractéristiques des épreuves à étudier doivent
être choisies en fonction d'une analyse théorique. Trois dimens
ions,