cours 5 - validité

Question 1

que veut-on savoir lorsque l’on évalue la validité d’un instrument de mesure?

Answer 1

on veut généralement savoir s’il mesure vraiment ce qu’il prétend mesurer, ou devrait mesurer…

Question 2

le degré de validité détermine quoi?

Answer 2

l’interprétation et les inférences que l’on peut faire à partir des scores d’une échelle

Question 3

quels sont les trois aspects à considérer pour juger la validité d’un test?

Answer 3

1- est-ce qu’il mesure bien le construit qu’il prétend mesurer?
2- est-ce qu’il mesure bien ce construit pour la population ciblée?
3- est-ce qu’il mesure bien ce construit dans une application particulière?

Question 4

quels sont les trois points clés que les organisations professionnelles soulignent à propos de la validité des tests?

Answer 4

1- la validité concerne l’interprétation des scores procurés par un test pour un construit spécifique; ce n’est pas une caractéristique du test.
2-la validité est une question de degré; ce n’est pas une question absolue, de tout ou de rien
3-la validité d’un test repose sur de solides bases théoriques et empiriques

Question 5

quels sont les principales sources de validité?

Answer 5

1-validité de contenu
2-validité de construit (factorielle, convergente, discriminante)
3-validité de critère (concomitante, prédictive, incrémentielle)

Question 6

qu’est-ce que la vraisemblance?

Answer 6

-aussi appelée validité d’apparence.
-n’est pas une forme ou une source de validité
-degré auquel un test semble pertinent et adéquat pour mesurer un construit, selon le jugement des personnes évaluées ou des utilisateurs. Il ne s’agit pas d’une preuve scientifique de validité, mais d’une perception pouvant influencer l’adhésion et la qualité des réponses.

Question 7

avec quoi la vraisemblance est parfois confondue?

Answer 7

avec la validité de contenu

Question 8

quels facteurs peuvent influencer la vraisemblance?

Answer 8

-format de présentation de l’instrument
-contexte d’évaluation
-capacités cognitives des répondants.es
-santé mentale et état psychologique des répondants.es
-personnalité des répondants.es
-motif de l’évaluation (désirabilité sociale [+ ou -])
etc.

Question 9

qu’est-ce que la validité de contenu?

Answer 9

réfère au degré de représentativité des items utilisés pour mesurer un construit

Question 10

quelles sont les deux questions à se poser pour la validité de contenu?

Answer 10

1- est-ce que chaque item individuellement correspond bien au construit
2-tous les items d’une échelle considérés comme un groupe constituent un échantillon représentatif de tous les domaines du construit d’intérêt?

Question 11

qu’est-ce qui est central pour la validité de contenu?

Answer 11

LA REPRÉSENTATIVITÉ, autant pour les domaines que les sous-domaines.

Question 12

pourquoi faut-il définir clairement un construit avant de créer une échelle?

Answer 12

parce qu’on doit savoir exactement ce qu’on veut mesurer pour créer des items qui représentent adéquatement toutes ses composantes

Question 13

Que risque-t-on si certains domaines d’un construit ne sont pas inclus dans une échelle?

Answer 13

Une sous-représentation du construit, ce qui diminue la validité de contenu

Question 14

à partir de quoi les chercheurs définissent un construit et donc son contenu?

Answer 14

1-cadre théorique
2-recherches empiriques
3-connaissances et expériences professionnelles

Question 15

quells sont les deux types de validité de contenu?

Answer 15

1-nominale (jugement vient des auteurs du test)
2-consensuelle (groupe de spécialistes indépendants)

Question 16

comment on demande aux experts de quantifier le degré de validité de contenu?

Answer 16

on leur donne un choix de réponse avec une gradation à propos de chaque item afin de systématiser le tout

Question 17

que faire avec les données numériques de la validité de contenu par les experts?

Answer 17

on peut calculer un Indice de Validité de Contenu (IVC). cela quantifie à quel point le test est pertinent

Question 18

quelles sont les deux grandes menaces à la validité de contenu?

Answer 18

1-inclusion de contenu conceptuellement non pertinent
2-sous-représentation conceptuelle de certains domaines du construit

Question 19

la validité de construit réfère à quoi?

Answer 19

C’est le degré auquel un test mesure réellement le construit psychologique qu’il prétend mesurer

Question 20

quelles sont les deux façons de vérifier la validité de construit?

Answer 20

1-validité factorielle
2-validité convergente/discriminante

Question 21

avant d’entamer les évaluations de la validité de construit, que faut-il bien connaitre?

Answer 21

la théorie sous-jacente au construit

Question 22

qu’est-ce qu’un facteur?

Answer 22

une réduction parcimonieuse de plusieurs variables (items ou questions) expliquées par une variable latente

(une dimension cachée (variable latente) qui explique pourquoi plusieurs questions d’un test sont liées entre elles.)

Question 23

vrai ou faux; dans les instruments multidimensionnels, les items ne peuvent pas se regrouper en plusieurs facteurs

Answer 23

faux, cela se peut

Question 24

quel est l’objectif de la validité factorielle?

Answer 24

vérifier deux aspects inter-reliés de la structure factorielle théorique:
1-les items sont-ils significativement associé au facteur?
2-si instrument multidimensionnel, les items sont significativement associés au facteur qu’ils doivent mesurer + Les items ne sont pas associés aux autres facteurs

Question 25

qu'est-ce que l'analyse factorielle exploratoire?

Answer 25

pour vérifier la validité factorielle. Une méthode statistique qui identifie les facteurs d’un test en regroupant les items corrélés entre eux.

Question 26

quoi faire si la corrélation d'un item est moins de 0,40 pour les deux facteurs (p.ex.), on fait quoi avec l'item?

Answer 26

on le rejette puisqu'il n'est pas associé à un facteur, donc ça ne sert à rien de le garder...

Question 27

qu'est-ce que la saturation factorielle croisée?

Answer 27

lorsque la corrélation d'un item est significative pour les deux facteurs

Question 28

est-ce dans AFC ou AFE qu'il y a une structure stricte? qu'est-ce que ça fait?

Answer 28

l'analyse factorielle confirmatoire. cela fait en sorte que l'on programme quels items sont associés à un facteur, tout en leur imposant une corrélation de 0 avec les autres facteurs

Question 29

qu'est-ce que la validité convergente?

Answer 29

degré auquel les scores d'une échelle sont associés à ceux d'une autre échelle existante qui mesure le même construit théorique

Question 30

qu'est-ce que la validité discriminante?

Answer 30

degré auquel les scores d'une échelle ne sont pas associés à ceux d'une échelle qui ne mesurent pas le même construit

Question 31

quel est l'idéal pour tester vigoureusement la validité convergente/divergente?

Answer 31

d'employer la méthode matrice multitraits-multiméthodes (entrevues, questionnaires...)

Question 32

la validité convergente on s'attend au mimimum à quoi?

Answer 32

à la corrélation mimimum, donc au moins 0,5 (meme si c'est 0,4). elle doit être statistiquement significative

Question 33

pour la validité divergente, quel sera le p?

Answer 33

p>0,05

Question 34

qu'est-ce que la validité de critère?

Answer 34

degré auquel les scores à une échelle sont associés à l'adaptation des individus

Question 35

les scores à l'échelle sont comparés à ceux d'un critère interne ou externe pour la validité de critère?

Answer 35

externe

Question 36

quels sont les deux grands types de validité de critère?

Answer 36

concomitante et prédictive

Question 37

quelles sont les deux façons d'estimer la validité de critère concomitante?

Answer 37

1-corrélation avec un critère indépendant (test d'intelligence avec réussite académique, test d'empathie avec conduites délinquantes...) 2-méthode des groupes contrastes (on teste les différences de scores moyens entre les groupes)

Question 38

qu'est-ce que la validité de critère prédictive?

Answer 38

elle vérifie si les scores d’un test permettent de prédire un résultat futur lié au construit mesuré. on a donc besoin d'une étude longitudinale prospective

Question 39

qu'est-ce que la validité incrémentielle?

Answer 39

capacité d’un test à améliorer la prédiction d’un résultat par rapport aux autres mesures déjà utilisées.

Question 40

qu'est-ce que la théorie de la décision?

Answer 40

déterminer à quel point les scores d'un test peuvent classifier adéquatement les personnes dans des groupes

Question 41

dans quel contextes de classification la théorie de la décision est pertinente?

Answer 41

le dépistage, le diagnostic, la sélection du personnel, la certification, la dérogation scolaire...

Question 42

Quel est le lien entre la théorie de la décision et la validité de critère ?

Answer 42

La validité de critère permet de vérifier si un test classe correctement les individus, ce qui influence la qualité des décisions.

Question 43

qu'est-ce que le concept de sensibilité?

Answer 43

capacité d'une échelle de procurer un résultat positif pour les personnes présentant le statut qu'elle prétend identifier. c'est donc la capacité de détection

Question 44

qu'est-ce que le concept de spécificité?

Answer 44

capacité d'une échelle de procurer un résultat négatif pour les personnes ne présentant pas le statut qu'elle prétend identifier. c'est donc la capacité de discrimination (identifier correctement les personnes qui n'ont pas le statut)

Question 45

qu'est-ce que la performance rétrospective?

Answer 45

elle évalue à quel point un test classe correctement des personnes dont on connaît déjà le diagnostic ou le statut.

Question 46

qu'est-ce que le pouvoir prédictif?

Answer 46

indique la probabilité que le résultat d’un test (positif ou négatif) reflète la réalité pour un individu.

Question 47

qu'est-ce que le pouvoir prédictif positif?

Answer 47

Probabilité qu’une personne avec un résultat positif ait réellement le trouble. (vrais positifs/ tous les résultats positifs)

Question 48

qu'est-ce que le pouvoir prédictif négatif?

Answer 48

Probabilité qu’une personne avec un résultat négatif n’ait réellement pas le trouble (vrais négatifs / tous les résultats négatifs)

Question 49

lorsque la prévalence est élevée, le pouvoir prédictif positif est...

Answer 49

fort

Question 50

dans les milieux cliniques, le taux de prévalence est...

Answer 50

élevé

Question 51

quels sont les deux problèmes potentiels avec les indices de sensibilité, spécificité et de pouvoir prédictif?

Answer 51

1-l'estimation de ces indices statistiques dépend de la validité et de la fidélité du critère de statut utilisé 2-l'estimation de la prévalence réelle dans différents contextes cliniques peut être difficile

Question 52

la fidélité est une condition nécessaire à...

Answer 52

la validité

Question 53

la validité est un préalable à...

Answer 53

la fidélité

Question 54

autant la fidélité que la validité sont des...

Answer 54

questions de degré