Fidélité-validité-contrôle Flashcards

(83 cards)

1
Q

Quels sont les trois vœux d’une
recherche heureuse

A
  • fidèlité
  • validité
  • contrôle
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Qu’est-ce que la fidélité d’un instrument ?

A

La précision et la constance de l’instrument : il donne toujours des résultats semblables lorsqu’il mesure la même chose.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

de quoi dépend la fidèlité d’une mesure?

A

de l’absence
relative d’erreur de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Une mesure fidèle est-elle nécessairement valide ?

A

Non. Une mesure peut être constante (fidèle) mais ne pas mesurer ce qu’elle prétend mesurer (non valide).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

quels sont les trois type de fidèlité

A
  • stabilité temporelle (test-retest)
  • équivalence (inter-juges ou formes parallèles)
  • Homogénéité (consistance interne)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

qu’est-ce que la stabilité temporelle

A

Se détermine sur la base de la constance
des résultats obtenus à la suite
d’applications répétées de l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

combien on administre de test habituellement pour vérifié la stabilité temporelle?

A

Habituellement, on a recours à 2
administrations de l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quand NE PAS utiliser un test-retest ?

A
  • Des tests de type situationnel qui mesurent un état passager
  • Des tests qui sont influencés par la mémoire ou l’apprentissage
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quand un test-retest est recommandé?

A

pour des construits qui
possèdent une stabilité temporelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

C’est quoi l’équivalence ?

A

Consistance des résultats obtenus à la suite de l’utilisation soit de différents instruments visant la
mesure de la même caractéristique ou soit d’un même instrument où
l’observateur est une source possible d’erreurs.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qu’est ce que le principe de l’indice d’équivalence?

A
  • Si plusieurs observateurs sont impliqués, l’indice d’équivalence peut être le pourcentage d’accord interjuges
  • Si ce sont des questions de tests, l’indice d’équivalence est un coefficient de corrélation entre
    les réponses à des échantillons de questions des deux instruments
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Que signifie le coéficient de l’indice d’équivalence?

A

une coéficient bas = variation entre les juges (peut engendré erreurs de mesures)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

qu’est ce que l’homogénéité ou consistance interne

A

C’est le degré de consistance qu’offrent les réponses d’un individu aux questions
variées d’un test

s’assurer qu’on mesure uniquement le contenue d’interet

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

à quel probabilité on s’interesse dans l’homogénéité?

A

à la probabilité qu’un (des) item(s)
mesure(nt) autre chose que ce qui est prévu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

qu’est ce qui peut réduire la fidélité?

A

l’ajout de bruit puisqu’on mesure pas nécéssairement la bonne chose

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

avec quoi pouvons nous calculer la fidèlité?

A
  • Alpha de Cronbach
  • La formule 20 de Kuder-Richardson (K-R 20)
  • La méthode moitié-moitié
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

qu’est ce que le Alpha de Cronbach

A

Une statistique fréquemment utilisée pour mesurer la consistance interne d’instruments de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

avec quelles échelles le alpha de Cronbach est approprié ?

A

Approprié pour échelles type dichotomiques, Likert ou
mesures intervalle/rapport

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

quel est l’interprétation du alpha de Cronbach?

A
  • alpha < 0,60 → inacceptable
  • alpha entre → 0,60 et 0,65 indésirable
  • Alpha entre → 0,65 et 0,70 minimalement acceptable
  • alpha entre → 0,70 et 0,80 respectable
  • alpha entre → 0,80 et 0,90 très bien
  • alpha > 0,90 → excellent
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

vrai ou faux, la formule 20 de Kuder-Richardson
(K-R 20) est désuet

A

vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

qu’est ce que la formule 20 de Kuder-Richardson
(K-R 20)

A

Une statistique anciennement utilisée pour mesurer la consistance interne d’instruments de mesure où les items sont dichotomiques (ex : oui-non)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Par quoi peut-on remplacer le K-R 20?

A

Cronbach alpha peut faire le travail aussi, étant
plus versatile

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

comment pouvons-nous interprété de coéficient de K-R 20

A

étendue 0.0 –
1.0 similaire à Cronbach

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Qu’est ce que la méthode moitié-moitié?

A

On divise en deux le test pour évaluer la
relation entre les deux moitiés

on calcul une corrélation qui nous estime quel serait la fidèlité d’un test si on allongerait ou racourcissait alors qu’on sait déjà sa fidélité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
comment pouvons nous interprété la corrélation de la méthode moitié-moitié?
La corrélation Pxx’ nous dit ce que serait la fidélité si le test était N fois plus long que ses moitiés N > 2: prédiction pour test plus long N < 2: prédiction pour test plus court
26
que signifie le n de la méthode moitié-moitié?
N = prédiction pour test plus cours ou plus long (comment la fidèlité changerait si le test à plus ou moins de question)
27
qu'est ce que la validité?
Est-ce qu'on mesure la bonne chose et ne peux pas être calculer comme la fidélité
28
Quels sont les 4 type de validité?
- interne - externe - écologique - de construit
29
Qu'est-ce que la validité interne?
- Est-ce que les données sont vraiment dues à ce qu’on prétend (expérience) ou à ce qu’on observe (étude)? - est-ce que les résultats ne dépendent pas d'autres facteurs non contrôlés --> degré de confiance avec lequel on peut attribuer l'effet observé à la VI, et non à d'autres facteurs
30
que voudrait dire un degré de validité interne élevé?
empêcher que des éléments étrangers ou variables parasites ne contaminent la mise à l’épreuve de l’hypothèse ***LES BIAIS
31
comment pouvons-nous accroitre la validité interne?
La validité interne tient à la qualité ou à la solidité du protocole expérimental utilisé et à l'efficacité et à la rigueur des contrôles effectués
32
Quels sont les 7 sources d'invalidité à considérer?
1. Expérience vécue du participant 2. La maturation 3. L'opération de mesure 4. La constance de l'instrument 5. La régression statistique 6. La sélection des participants 7. La perte de participants (mortalité ou attrition)
33
Qu'est ce que l'expérience vécue du participant? | source d'invalidité 1
Événements qui surviennent pendant et entre les prises de mesures et qui ne dépendent pas de la manipulation expérimentale - Ex : divorce ou nouvelle relation
34
Qu'est-ce que la maturation? | source d'invalidité 2
Les processus individuels qui se développent en fonction du passage du temps - Ex : vieillissement, croissance, expérience personnelle
35
À quel moment se produit la modification de la nature de la maturation?
souvent à l'intérieur de périodes de temps très brèves
36
Quel est la solution de la maturation?
Étant donné que ce facteur joue dans toutes études, l'utilisation d'un groupe témoin provenant de la même population précisera et contrôlera les effets de la maturation
37
Qu'est-ce que l'opération de mesure? | source d'invalidité 3
Le seul fait de répéter un test risque d'influencer les résultats - Les différences observées entre la première mesure et sa répétition peuvent dépendre simplement de l'opération de mesure et non du traitement expérimental
38
Quel est la solution de l'opération de mesure?
Un groupe témoin qui n’est pas exposé à la VI permettra de préciser cet effet de l'opération de mesure
39
Qu'est-ce qu la constance de l'instrument? | source d'invalidité 4
Il peut se produire des changements dans la calibration d'instrument de mesure ou dans la manière dont l'expérimentateur recueille ses données
40
de quoi peuvent dépendre les changement observé entre les mesures du pré-test et du post-test?
de l'instrument de mesure
41
qu'est ce que la régression statistique? | source d'invalidité 5
Phénomène qui se manifeste surtout quand on choisit des groupes qui se situent aux extrémités d'une échelle de mesure
42
comment peux se porduire la régression statistique?
En faisant la sélection des participants, l'expérimentateur choisit ceux-celles qui obtiennent un score très élevé ou très bas à un moment précis, ce qui ne représente pas la position habituelle de ces individus - Lors d'évaluations subséquentes, ils auront tendance en tant que groupe à se rapprocher de la moyenne - S’applique aux construits variables (Les mesures stables moins susceptibles)
43
pourquoi les scores extrême peuvent être problématique?
car les scores extrême ont tendance à ne pas être continuellement extrème
44
Qu'est ce que la sélection des participants? | source d'invalidité 6
Déformations systématiques dans la composition comparative des groupes expérimentaux et témoins
45
qu'est ce qui pourrait être suffisant pour expliquer un changement éventuel? (sélection des participants)
Le fait que les participants proviennent d'une population différente
46
Qu'est-ce que la perte de particiapants? | source d'invalidité 7
Si plusieurs participants d'un même groupe abandonnent, il peut s'en suivre des effets spécifiques qui ne dépendent aucunement de la variable expérimentale
47
quels question devons nous se poser lorsqu'il y a la perte d'un participant?
- Peut entraîner une diminution de la représentativité - Pourquoi un groupe a plus d’abandons qu’un autre?
48
Qu'est-ce que la validité externe?
Se préoccupe de la possibilité de généraliser les résultats de l’étude au-delà de l’échantillon, des circonstances
49
en relation avec les biais quels sont les 4 facteurs importants à considérer dans la validité externe?
1. La réaction à la mesure 2. Les effets d'interaction d'un ou des facteurs de validité interne avec VI 3. Effets spécifiques liés au déroulement de l'expérience 4. l'interférence associée à un traitement multiple
50
Qu'est- ce que la réaction à la mesure?
- La prise de mesure au cours d'un pré-test peut contribuer à augmenter ou diminuer la sensibilité du participant à l'endroit de la variable étudiée - Le seul fait de demander d'observer ou d'enregistrer la fréquence ou la durée d'un comportement entraînera une modification de ce comportement | être mesué influance sur comment on agit?
51
Qu'est ce que l'effets d'interaction d'un ou des facteurs de validité interne avec VI
Se produit alors qu’un élément de validité interne co-varie avec une variable indépendante
52
Qu'est ce que l'effets spécifiques liés au déroulement de l'expérience
- Parfois, les particularités de la démarche expérimentale sont telles qu'elles incitent les sujets à donner telle réponse plutôt que telle autre - Les résultats ainsi obtenus limitent grandement la portée des conclusions ou les rendent invalides
53
Qu'est-ce qu l' interférence associée à un traitement multiple
Lorsque plusieurs traitements sont présentés simultanément, il devient difficile d'évaluer le poids relatif de chacun d'eux - À moins d’avoir un plan factoriel
54
Qu'est-ce que la validité écologique?
Contexte dans lequel se déroule la recherche, y compris les tâches que les participants effectueront - Signification que la personne confère à la situation dans laquelle la recherche la place ou l’étudie
55
qu'est ce que la validité de construit?
Est-ce que le test mesure bien le construit tel qu’il est défini par son cadre théorique de base?
56
Quels sont les deux approches de la validité de construit?
- Validité convergente - validité divergente ( ou discriminante)
57
Qu'est-ce que la validité de construit convergente?
Capacité d’une mesure de produire des résultats semblables à ceux produits par d’autres mesures qui sont reliées au construit en question - Consiste à corréler un test avec un critère approprié
58
Qu'est-ce que la validité de construit divergente?
Consiste à démontrer que le test n’est pas significativement corrélé avec des critères non pertinents ## Footnote attention à la comorbidité, capacité de les mesurer différement
59
vrai ou faux, le controle est notre plus gros souhait, mais aussi notre plus grande crainte?
vrai
60
quel est le but du controle?
- Les conclusions sont impossibles à tirer en présence d’interprétations alternatives plausibles - Les interprétations alternatives surviennent quand des variables externes ou parasites ou confondantes peuvent avoir influencé les résultats - Les interprétations alternatives empêchent le progrès
61
Vrai ou faux, un ensemble de procédures existent pour contrôler les variables parasites
vrai
62
pouquoi devons-nous maintenir la variable parasite constante?
- Certifie qu’elle ne peut avoir causé les différences entre les groupes (groupe controle) - Peut limiter la validité externe des résultats
63
Qu'est ce qui protège contre les biais d’échantillons
L’échantillonnage aléatoire
64
Qu'est-ce qui assure que les groupes sont comparables avant toute intervention?
L’assignation aléatoire
65
Pourquoi l'assignation aléatoire « assure » que les groupes sont comparables avant toute intervention
Les variables parasites sont distribuées également à travers les différents groupes
66
si on ne peut éliminé les variables parasites que devons nous faire?
les inclures donc la variable parasite devient une VI additionnelle
67
quand on utilise le contrôles statistiques?
Lorsque les contrôles expérimentaux sont inexistants ou insuffisants - Scores de changement (avant-après) - Analyse de la covariance - Corrélations partielles
68
Quel est la meilleure approche face aux controle?
Le plus de contrôles possible! MAIS Contrôle total n’est pas un objectif réalisable
69
Quels est l'une des obstacles les plus important en science?
L’incapacité à contrôler les variables parasites
70
à quel moment la publication devient très difficile?
Dès qu’un évaluateur identifie un parasite raisonnable !! meme si pas vrai!!
71
Tu passes un test d’intelligence 3 fois en un mois et tu as toujours le même score. Quelle propriété est démontrée ?
Fidélité – Stabilité temporelle (test-retest).
72
Un pré-test influence la façon dont les participants répondent au post-test. Quelle menace est en jeu ?
L’opération de mesure.
73
Les participants savent qu’ils sont observés, alors ils changent leur comportement. Quelle menace ?
Réaction à la mesure.
74
Un casino en laboratoire ressemble physiquement à un vrai, mais les participants n’ont pas l’impression de pouvoir vraiment perdre de l’argent. Quelle validité est affectée ?
Validité écologique.
75
Un test d’anxiété ne corrèle pas avec un test de colère. Quelle validité est démontrée ?
Validité divergente.
76
Pourquoi utiliser l’assignation aléatoire ?
Pour distribuer équitablement les variables parasites entre les groupes.
77
Une psychologue crée un test de stress. Elle le fait passer une fois en septembre et une fois en décembre. Les scores sont très différents, mais les participants rapportent que leur semestre a été très difficile. Quelle menace ?
expériance vécue
78
Tu veux tester un programme pour réduire l’anxiété sociale. Mais plusieurs participants du groupe expérimental abandonnent parce que le programme est trop exigeant. Quelle menace ?
La perte de participants (attrition).
79
Tu veux savoir si une nouvelle technique de gestion du temps fonctionne. Tu sélectionnes les personnes les plus désorganisées (scores très bas). Au post-test, elles obtiennent des scores plus normaux, mais tu n’es pas certain que la technique a réellement fonctionné. Quelle menace ?
La régression statistique vers la moyenne.
80
Deux observateurs évaluent le niveau d’agressivité dans une cour d’école. Un observateur est très strict, l’autre très laxiste. Quel type de fidélité est en jeu ?
Fidélité d’équivalence – Accord inter-juges.
81
Tu veux tester si une pilule anti-stress fonctionne. Tu donnes la pilule avec un grand verre d’eau… mais tu ne contrôles pas l’eau dans le groupe contrôle. Quelle erreur de contrôle ?
Absence de variable constante → variable parasite (l’eau).
82
Tu compares l’effet de deux méthodes pédagogiques, mais le groupe A est testé le matin et le groupe B l’après-midi, quand l’ordinateur surchauffe et ralentit les tâches. Quel facteur menace ?
Interaction entre VI et une menace de validité interne (constance de l’instrument).
83
Un test d’intelligence verbale corrèle fortement avec un test de vocabulaire. Validité convergente ou divergente ?
Validité convergente.