Cours 7 Flashcards

(45 cards)

1
Q

C’est le devoir de l’utilisateur.trice des tests psychométrique de ______.

A

D’être informé.e que tout test psychométrique peut être biaisé

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
1
Q

V ou F: Les biais sont dus à l’erreur systématique ET au erreurs aléatoires.

A

Faux, c’est dus à l’erreur systématique, et non aléatoire.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Une chose très importante est de ne pas confondre différence de moyenne entre des groupes et biais

A
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

V ou F: Les différences de moyenne entre certains groupes indiquent a priori un biais possible.

A

Les différences de moyenne entre certains groupes ne constituent pas a priori un biais puisque certaines sont attendues sur le plan théorique / conceptuel
- e.g., À l’adolescence, peu ou pas de différences de moyenne entre groupes ethniques pour problèmes de comportement, mais différences selon le sexe/genre
- e.g., À l’âge adulte, présence de différences selon le sexe/genre dans certains traits de personnalité, mais peu ou pas à l’adolescence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Qu’est-ce qu’un test biaisé, selon Merrell, 2008; Whitcomb, 2017 ?

A
  • si les différences entre les membres de différents groupes sont identifiées sur la base de caractéristiques autres que celles que l’instrument prétend évaluer
  • il y a présence de biais pour un instrument si le contenu, la procédure ou l’utilisation FAVORISE ou DÉFAVORISE systématiquement les membres d’un groupe plutôt qu’un autre et si cette différenciation est non pertinente à l’objectif de l’instrument
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

La fidélité des scores d’un instrument d’évaluation peut être compromise par différentes sources d’erreur de mesure.
La validité détermine ce qu’on a le droit de conclure à partir d’un score.
- Si la validité est faible, les inférences qu’on peut faire sont limitées.
- Si la validité est forte, les inférences sont solides et justifiées

A
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

La validité peut être affectée directement par:

A

(a) biais de réponse aux items individuels
(b) biais des scores à une échelle (scores composites)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

V ou F: Les personnes qui sont évaluées et doivent répondre aux questions, que ce soit à propos d’elles-mêmes ou en tant qu’informatrices pour un tiers, risquent toujours d’être en partie biaisées

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Même à un niveau de base, il est maintenant reconnu que le système cognitif de l’humain est «victime» de plusieurs heuristiques ou biais cognitifs (Kahneman, 2011; Kahneman, Slovic & Tversky, 1982)

A
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce qu’un heuristique? (Kahneman, 2011)

A
  • Stratégies cognitives utilisées pour simplifier et accélérer la prise de décision ou la résolution de problème en situation d’incertitude
  • Parfois appelées «raccourcis mentaux»
  • mécanismes ou processus normaux chez l’humain et sont souvent positifs : ils aident effectivement à prendre des décisions et résoudre des problèmes
  • pratiques, mais parfois ils sont parfois la source de biais puisqu’ils peuvent menés à des réponses erronées ou illogiques, à des erreurs de jugement
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quel est le risque de se baser sur des heuristiques?

A
  • heuristiques s’appliquent à l’évaluation/estimation d’une personne
  • quand on ne connait pas assez bien une personne à évaluer, notre cerveau va mettre en branle des mécanismes d’aides
  • peuvent aussi mener à «stéréotyper» les personnes de certains groupes, ce qui influence leur évaluation
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quels sont les 4 types d’heuristiques?

A
  1. heuristiques de représentativité
  2. heuristique de disponibilité
  3. effet de primauté / de récence
  4. heuristique de l’affect
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce que l’heuristique de représentativité?

A
  • Évaluation d’une caractéristique spécifique en fonction de son degré de concordance à un prototype mental propre à l’évaluateur
  • (e.g., évaluer l’attention d’un enfant en fonction de notre prototype du TDAH)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce que l’heuristique de disponibilité?

A
  • Évaluation d’une caractéristique en fonction des informations immédiatement disponibles en mémoire, sans chercher à en acquérir de nouvelles
  • (e.g., comportements d’agressivité des enfants)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce que l’effet de primauté / de récence?

A
  • Évaluation d’une caractéristique en fonction de la première vs la dernière impression de l’individu
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce que l’heuristique de l’affect?

A
  • Évaluation d’une caractéristique en fonction de l’état émotionnel et affectif actuel de l’évaluateur
  • (e.g., mauvaise humeur de la mère mène à estimer la présence de davantage de problèmes de comportement chez son enfant)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quels sont deux effets de biais cognitifs souvent évoqués en évaluation?

A
  1. effet halo
  2. effet barnum
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qu’est-ce que l’effet halo?

A
  • perception générale positive que l’évaluateur a d’un individu influence son évaluation de l’ensemble de ses caractéristiques spécifiques
  • une généralisation erronée)
  • une fois qu’un individu est perçu comme bon/beau, l’évaluateur a tendance à estimer que ses autres caractéristiques sont également positives
  • aussi appelé «stéréotype de l’attirance physique» ou le principe du «ce qui est beau est bon» en psychologie sociale
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quel est le concept ici:
“La perception générale d’une personne peut parfois biaiser l’évaluation des aspects spécifiques de son adaptation”

A

l’effet halo

19
Q

Qu’est-ce que l’effet halo négatif?

A
  • e.g., un individu qui est globalement perçu comme «moins physiquement attirant», ou «mauvais» ou comme ayant une «mauvaise personnalité»
  • qui mène a surestimer la présence potentielle de problèmes comportementaux spécifiques lors d’une évaluation
  • similaire à l’effet d’étiquetage
20
Q

Qu’est-ce que l’effet barnum?

A
  1. on lit quelque chose qui pourrait s’appliquer à n’importe qui… mais on a l’impression que ça parle de nous.
  2. particulièrement présent si:
    - la personne évaluée est persuadée que l’analyse s’applique à elle seule
    - la personne évaluée reconnait une autorité à l’évaluateur
    - la présence dans l’analyse de traits majoritairement positifs
21
Q

Les heuristiques, biais cognitifs et biais de réponse peuvent sembler banals à première vue, mais ils peuvent être très graves puisqu’ils:

A

influencent directement la validité des scores obtenus à un test

22
Q

Qu’est-ce que la validité diminuée?

A
  • peut compromettre la qualité des inférences et des décisions cliniques qui sont prises à propos d’un individu (ou d’un groupe) évalué
23
Q

Quels sont les 8 grands types de biais de réponse?

A
  1. d’extrémité
  2. indécision
  3. acquiescement
  4. objection
  5. désirabilité sociale
  6. gestion défavorable des impressions (malingering)
  7. réponse aléatoire ou négligente
  8. deviner (guessing)
24
Qu'est-ce que le biais de réponse d'extrémité?
- tendance à répondre très souvent par les catégories extrêmes, peu importe le niveau de l'individu sur le construit (ex: score à échelle) - pour des items à choix de réponse multiples
25
Qu'est-ce que le biais de réponse indécision?
- tendance à répondre très souvent par la catégorie centrale, peu importe le niveau de l'individu sur le construit (ex: score à échelle) - pour des items à choix de réponses multiples
26
Qu'est-ce que le biais de réponse d'acquiescement?
- tendance à endosser des items, sans égard à leur contenu - répondre "oui" ou "vrai" dans des items dichotomiques; répondre du côté positif pour des items avec plus de deux choix de réponse - parfois appelée "gestion favorable des impressions"
27
Qu'est-ce que le biais de réponse de l'objection?
- tendance à rejeter des items, sans égard à leur contenu - répondre "non" ou "faux" dans les items dichotomiques; répondre du côté négatif pour les items avec plus de deux choix de réponse
28
Qu'est-ce que le biais de réponse de la désirabilité sociale?
- tendance à répondre de façon socialement désirable ou exagérement positive a des items positifs improbables, pour exagérer les qualités - parfois appelée échelle de mensonge
29
Qu'est-ce que le biais de réponse de gestion défavorable des impression?
- tendance à répondre de manière socialement indésirable ou exagéremment négative pour exagérer ses limites ou ses problèmes d'adaptation
30
Qu'est-ce que le biais de réponse "réponse aléatoire ou négligente"?
- répondre aux items de façon aléatoire ou avec très peu d'attention au contenu des items
31
Qu'est-ce que le biais de réponse de deviner (guessing)?
- tendance à deviner la bonne réponse aux items - pertinent seulement pour les tests de performance
32
Que faire pour prévenir ou minimiser les biais de réponse ? IMPORTANT
1. Gestion de la situation d’évaluation - anonymat - minimiser la frustration - donner des avertissements (i.e., prévenir qu’il y a des échelles de validité) 2. Gestion du contenu des tests - Items simples (niveau de langage), - items avec contenu neutre (i.e., non-suggestif) - choix de réponse conceptuellement clairs 3. Utiliser des tests ou échelles de validité spécialisées
33
V ou F: des scores très élevés ou extrêmes (i.e., endosser un nombre anormalement élevé d’items) suggèrent un problème potentiel
Vrai
34
Qu'est-ce que l'échelle d’indétermination (e.g., celle du MMPI-2; Ben-Porath & Tellegen, 2008)?
Le questionnaire MMPI-2 complet compte plus de 567 questions - Version papier: Somme des items non répondus, ou des items avec plusieurs réponses sur même item - Version en ligne: Somme des items avec temps de réponse trop court
35
Qu'est-ce que l'échelle de désirabilité sociale de Marlowe-Crowne (Crowne & Marlow, 1960) et l'Inventaire balancé de style de réponse socialement désirable?
1. Marlowe-Crowne (Crowne & Marlow, 1960) ? - e.g., « je ne mens jamais »; « j’aime tous les gens que je connais »; « je ne me suis jamais mis.e en colère ». 2. Inventaire balancé de style de réponse socialement désirable (Pauhlus, 1984) comprend deux échelles distinctes - Auto-déception : réponses généralement honnêtes, mais exagérément positives - Gestion des impressions : réponses malhonnêtes, le biais positif sert à (a) plaire aux autres ou (b) obtenir des avantages
36
Qu'est-ce que l'échelle de gestion dévavorable des impressions (e.g., celle du MMPI-2; Ben-Porath & Tellegen, 2008)
Échelle de gestion dévavorable des impressions (e.g., celle du MMPI-2; Ben-Porath & Tellegen, 2008) Tendance à répondre positivement à des items négatifs improbables (e.g., « je ne suis bon.ne à rien »; « je n’ai aucun talent ») Effet difficile à départager avec cas cliniques sévères (e.g., dépression majeure ou trouble de personnalité dépressive, etc.)
37
En ce qui concerne les échelles de validité, qu'est-ce que l'incohérence variable des réponses (VRIN)?
1. Somme du nombre de paires d’items qui ont été répondues de façon incohérente a) Similaire: « Je ne pense pas avant d’agir » – « J’agis sans réfléchir aux conséquences » b) Différent: « Je ne pense pas avant d’agir » – « J’y pense bien avant de prendre des décisions » - On donne 1 pt pour chaque paire incohérente et calcule une somme 2. Sert à détecter les réponses aléatoires (intentionnelle ou non) ou la confusion dans un questionnaire
38
En ce qui concerne les échelles de validité, qu'est-ce que l'incohérence vraie des réponses (TRIN)?
Sert à détecter les réponses incohérentes qui révèlent l’acquiescement (score très élevé) ou l’objection (score très faible, possiblement négatif) - On utilise seulement des paires d’items qui sont conceptuellement différentes - On calcule une somme des paires d’items répondues vrai de façon incohérente, moins la somme des paires d’items répondus faux de façon incohérente
39
Évaluation du biais des items et tests:
- biais des items - biais structurel - biais critériel - biais de fidélité
40
En ce qui concerne l'évaluation du biais des items et tests: qu'est-ce que le biais des items
- Un item est biaisé si, pour deux personnes qui ont le même niveau réel sur le trait, l’item donne des résultats différents selon leur groupe - différences systématiques dans la probabilité de répondre d’une façon donnée pour chaque item individuellement, une fois que le niveau du trait est contrôlé - aussi appelé « fonctionnement différentiel des items » - on compare la probabilité d’endosser les items d’une échelle pour des individus de différents groupes qui ont le même score/niveau sur le trait - même principe que les variables de contrôle dans les études prédictives (e.g., lorsqu’on « contrôle pour le SSÉ »)
41
Métaphore pour biais d'item: Imagine deux personnes qui ont exactement la même température intérieure (donc le même niveau du trait). Si le thermomètre fonctionne bien : → il affiche la même température pour les deux. Si le thermomètre est biaisé pour un groupe : → il affiche 38°C pour l’un et 36°C pour l’autre, alors qu’ils ont la même vraie température. C’est ça, un item biaisé : À trait égal, l’item ne donne pas la même probabilité de réponse selon le groupe.
42
Biais structurel
👉 Ce n’est plus seulement un item qui fonctionne différemment. 👉 C’est l’architecture complète du test qui change selon le groupe Si les saturations factorielles sont significativement différentes entre deux groupes, ça veut dire : - les items ne se lient pas au facteur de la même façon - le facteur n’a pas la même signification selon les groupes - donc le trait n’est pas mesuré de la même manière - SE RÉFÉRER À LA SLIDE 31
43
fonctionnement différentiel des items (IMPORTANT)
44
biais critériel
S’applique autant à la validité de critère concomitante (critère indépendant et groupes contrastés) qu’à la validité prédictive e.g., Un trait tempéramental qui prédit l’adaptation ultérieure pour un groupe d’enfants, mais pas pour un autre e.g., Un test de QI prédit la réussite pour un groupe culturel, mais pas pour un autre Attention: l’observation de différences entre des groupes pour les relations prédictives peut être attendue parce que ceci est justifié théoriquement … il ne s’agit alors pas d’un biais