VN-Ch09-1Examen des items et anomalies de saisie des questions ouvertes

Texte de la pièce

Texte extrait du volume pour la lecture à l’écran, la recherche et la citation. Le PDF fait foi pour la mise en page des tableaux et des figures.

Complément du chapitre 9, section 9.1

Avant toute comparaison, les vingt items à choix multiples du test ont été examinés sur les copies de T0, comme le prévoit le plan d’analyse (section 7.4.2). Sept items sortent des seuils, définis après le recueil (difficulté entre 0,20 et 0,90, corrélation point-bisériale corrigée d’au moins 0,20) : Q2, Q3, Q4, Q8, Q17, Q18, Q20. Ils ont été retirés des deux temps. Le score porte donc sur 13 items et les deux questions ouvertes, soit 23 points ; le sous-score d’analyse ne repose plus que sur un item et n’est pas interprété. La fidélité KR-20 sur T0 vaut ,71 sur les vingt items et ,73 sur les treize retenus. Les absences de réponse et les réponses multiples ont été codées 0. Le test porte sur les trois chapitres de 3AC du prototype, alors que la classe utilisatrice n’a travaillé en classe, sur la plateforme, que le chapitre « La digestion » : selon le tableau de spécification du test, six des treize items retenus, Q1, Q7, Q9, Q10, Q15 et Q16, portent sur les deux autres chapitres, consacrés aux aliments et à l’éducation nutritionnelle. Un écart sur ces items ne peut pas être rapporté au chapitre utilisé ; le score total et les sous-scores, qui les incluent, se lisent donc avec cette réserve, et le présent chapitre ne sépare pas les scores par chapitre du prototype.

Deux anomalies du fichier sont à déclarer. Les points des deux questions ouvertes comportent des demi-points dans environ la moitié des copies. La grille de correction (C5) autorise un demi-point, une seule fois par copie, pour un élément formulé en termes vagues : l’écart à la grille porte sur les copies qui en comptent davantage, dont le nombre n’est pas établi ici. Le corrigé du test compte en outre des éléments à 0,5 et à 1,5 point, si bien que les totaux saisis ne permettent pas d’isoler ces demi-points. Les valeurs ont été conservées telles quelles et chaque analyse est doublée d’une analyse sur les seuls items à choix multiples, que cette anomalie ne touche pas. Aucune double correction des copies n’a été conduite : l’accord entre correcteurs ne peut pas être calculé, et cette limite est reprise au chapitre 11. Les copies ont été corrigées et les conceptions codées par l’enseignant, qui savait à quelle classe chaque copie appartenait. C’est dans ces conditions qu’ont été obtenus les résultats des élèves, rapportés en 9.2.