8 - Méthode de construction d'échelles

Question 1

Dans quoi sont répertorité les critères pour construire un instrument?

Answer 1

Dans le Standards du testing en éducation et en psychologie

Question 2

Vrai ou faux. La construction D’un test peut être terminé.

Answer 2

Faux. ○ Nécessite des révisions avant d’être pleinement satisfaisant
Peut s’échelonner sur plusieurs années, voire quelques décennies

Question 3

Vrai ou faux. La construction d’un test se fait de façon concomitante.

Answer 3

faux. De façon successive

Question 4

Quelles sont les 2 grandes méthodes de construction d’échelles? En quoi consistent-elles?

Answer 4

• Déductive (rationnelle): basée sur une théorie (conclure en partant de propositions prises pour prémisse)
• Inductive(Empirique): on formule des items, et on laisse les données nous donner la réponse avec des analyses statistiques, pas basé sur une théorie (Conclure en remontant des faits à la loi)

Question 5

Quelles sont les 2 théories qui peuvent être utilisée pour construire une échelle avec la méthode déductive?

Answer 5

• Théorie scientifique: Construits, domaines, indicateurs (les concepteurs.trices du test les déterminent en fonction de la théorie)
• Théorie clinique : On veut répondre à un manque ou besoin pratique

Question 6

Quel est l’avantage de la méthode déductive?

Answer 6

Contexte théorique clair, cohérence logique (i.e., réseau nomologique souvent connu a priori)

Question 7

Quels sont les désavantages de la méthode déductive?

Answer 7

• Subjectivité face à la théorie, théorie implicite des auteurs.trices
• On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques (i.e., la structure factorielle, validité de critère, etc.)
• On ne sait pas si les répondants.es interpréteront les items inspirés de la théorie (et en conséquence, les construits) de la même manière que le concepteur.trice du test le croyait

Question 8

Quelles sont les 2 étapes de la méthode inductive?

Answer 8

1. Analyse D’items/Analyse factorielle
2. Sélection critériée

Question 9

Dans la méthode inductive, en quoi consiste l’analyse d’item?

Answer 9

les items statistiquement liés au construits sont sélectionnés (corrélations item-total, saturations factorielles, etc.) On garde les items qui ont une saturation factorielle élevé avec les facteurs, et on retire les autres.

Question 10

Dans la méthode inductive, en quoi consiste la sélection critériée?

Answer 10

seuls les items qui différencient des groupes sont sélectionnés (Lien avec la méthode des groupes contrastées

Question 11

Quel est l’avantage de la méthode inductive?

Answer 11

Plus grande objectivité et plus représentatif de la réalité; on vérifie notre compréhension d’un construit, appuyée explicitement par des données

Question 12

Quels sont les inconvénients de la méthode inductive?

Answer 12

• On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final (e.g., structure factorielle, etc.)
• Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage

Question 13

À quoi sert l’analyse d’item?

Answer 13

Sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques

Question 14

Quels sont les 2 indices utilisés pour l’analyse d’items?

Answer 14

• Difficulté de l’item
• Discrimination de l’item

Question 15

Qu’est-ce que la difficulté de l’item?

Answer 15

la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item
Le nom « difficulté » a été donné simplement parce qu’initialement, a été développé avec des tests de performance

Question 16

en quoi consiste la difficulté d’item pour des items à choix de réponses multiples?

Answer 16

devient la proportion d’individus qui endossent chaque catégorie de réponse

Question 17

Quelt type d’items souhait-on en terme de difficulté d’item?

Answer 17

on souhaite une variété d’items, certains faciles, d’autres difficiles et certains moyens

Question 18

Pourquoi ne veut-on pas trop d’items trop faciles ou trop difficiles?

Answer 18

On veut pouvoir discriminer

Question 19

Un item ou 50% des personnes répondent vrai et 50% répondent faux est-il un bon item? et un item ou 99% répondent vrai ou 1% répondent faux?

Answer 19

1er: Bon
2ème: Mauvais, trop facile

Question 20

Qu’est-ce que la discrimination d’items?

Answer 20

le degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse

Question 21

Pourquoi peut-on aussi nommer la discrimination d’items l’effet D’item?

Answer 21

puisqu’il s’agit d’un indice de l’efficacité d’un item de discriminer les individus qui connaissent le contenu de ceux qui ne le connaissent pas

Question 22

Comment peut-on faire la discrimination d’item avec une échelle à choix multiples?

Answer 22

en appliquant une corrélation corrigée entre le score à l’échelle et l’item

Question 23

sur quoi se base-t-on pour choisir les items?

Answer 23

• Type de construit évalué
• Utilisations particulières d’un instrument
• Préférences personnelles des auteurs.trices

Question 24

Comment peut-on présenter les questions ?

Answer 24

• Oralement en entrevue
• Oralement en version informatique (i.e., appli qui « lit » les questions)
• Visuellement en version papier-crayon
• Visuellement en version informatique (sur ordinateur fixe, ou avec appli sur un téléphone intelligent, une tablette)

Question 25

Quels types de réponses peuvent être demandés?

Answer 25

(a) items à réponses construites (b) items à réponses sélectionnées

Question 26

Qu'est-ce qu'un item à réponses construites?

Answer 26

Une prémisse est présentée à la personne évaluée (On explique ce sur quoi on veut que la personne développe), mais pas de contrainte sur un choix de réponse fixe

Question 27

Quels sont les différents types de réponses à des items à réponses construites?

Answer 27

- Questions ouvertes à réponse longue - Questions ouvertes à réponses courte

Question 28

Qu'est-ce qu'un item à réponses sélectionnés?

Answer 28

Une prémisse est présentée à la personne évaluée et elle est placée devant la contrainte cognitive d’un choix de réponse fixe

Question 29

Pourquoi utilise-t-on surtout des items à réponses sélectionnés en psychologie?

Answer 29

Parce qu'ils sont plus objectifs, plus facile de dériver en score numérique, plus fiables, souvent plus brefs, etc

Question 30

Quelles sont les 4 tâches cognitives qu'une personne doit faire pour répondre à une question à réponse sélectionnée?

Answer 30

1. Compréhension : comprendre le contenu pertinent 2. Récupération : récupérer l’information pertinente en mémoire qui est nécessaire pour répondre 3. Jugement : porter un jugement sur la base de l’information récupérée 4. Répondre : rapporter ce jugement, sur la base du choix de réponse disponible

Question 31

Qu'est-ce qu'une traduction maison au Québec?

Answer 31

(1) sans aucune étude vérifiant leurs propriétés psychométriques et/ou (2) sans recueillir des normes québécoises

Question 32

***Qu'est-ce qu'il est souvent nécessaire lorsqu'on fait une traduction?

Answer 32

De faire une adaptation des items

Question 33

***Qu'est-ce qui est très important dans une traduction?

Answer 33

La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte

Question 34

Quelles sont les 6 étapes de l'adaptation transculturelle?

Answer 34

1. Traduire et adapter les items (2 personnes minimum) 2. Experts.es indépendants.es révisent la traduction 3. Éliminer ou adapter les items selon leurs commentaires 4. Étude pilote auprès des individus ciblés 5. Validation empirique formelle (évaluation détaillée des propriétés psychométriques) 6. Standardisation (établir des normes)

Question 35

Quelle méthode est souvent utilisée pour traduire et adapter les items ?

Answer 35

Traduction à rebours (« back translation ») Une personne traduit de l'anglais au français, et une autre prend la version traduite en français et la retraduit en anglais. Le sens des items devraient être resté le même. Pas une traduction exacte mot à mot. Si le sens est le même, on garde l'item/la traduction

Question 36

Qu'est-ce que l'équivalence sémantique?

Answer 36

S’assurer que les items ont la même signification dans les deux langages / cultures

Question 37

Qu'est-ce que l'équivalence de contenu?

Answer 37

S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit

Question 38

Qu'est-ce que l'équivalence factorielle?

Answer 38

S’assurer que la structure factorielle est la même dans les deux langages / cultures

Question 39

Qu'est-ce que l'équivalence critériée?

Answer 39

S’assurer que la validité de critère est similaire dans les deux langages / cultures

Question 40

Qu'est-ce que l'équivalence de la fidélité?

Answer 40

S’assurer que les indices de fidélité sont similaires dans les deux langages / cultures (souvent cohérence interne)

Question 41

La discrimination d'items s'applique-t-elle seulement aux test de performance?

Answer 41

* Bien que la logique semble surtout s’appliquer aux tests de performance, l’indice de discrimination s’applique aussi aux instruments de mesure de construits avec des items sans « bonne réponse » Par exemple, corrélation entre le score à une échelle d’Émotivité négative et un item particulier (e.g., irritabilité) indique à quel point cet item est un bon indicateur permettant de différencier les individus qui ont un niveau élevé (ou faible) d’émotivité négative de ceux qui n’en ont pas un

Question 42

Vrai ou faux. Dans bien des cas, la fréquence est plus grave que la variété.

Answer 42

Faux. La variété est souvent plus grave que la fréquence

Question 43

Quelles peuvent être les caractéristiques souhaitables des items pour minimiser les biais aux 4 tâches cognitives nécessaires pour répondre aux questions?

Answer 43

niveau de langage simple, bref, choix de réponses simples, éviter les contenus multiples, absence de leurre, etc