Qu’est ce qu’une variance non pertinente ? Donnez des exemples.
C’est la variance qui ne nous permet pas d’interpréter les résultats des tests.
Ex : transitoire : fatigue, examinée : culture, environnement : lumière, erreurs de l’examinateur, …
Qu’est ce que la validité ?
Question de est-ce que l’attribut existe et si c’est celui qui est évalué par le test.
Que représente la validation ?
Les stratégies que l’on va pouvoir mettre en oeuvre pour la validité.
Quelles sont les différentes sources/ preuves de la validité dans une perpective contemporaine (depuis 1999) qui constituent la validité de construit ?
- Indices basés sur le contenu
- Indices basés sur les processus de réponses
- Indices basés sur la structure interne
- Association avec des variables externes
- Conséquences de l’utilisation
Qu-est ce que la validité de contenu ?
Comment est-ce mesuré ?
Adéquation entre le contenu actuel du test et le contenu théorique en termes de représentativité et d’exhaustivité des items.
Des experts évaluent le contenu des items mais aussi chaque étape de la passation.
Qu-est ce que la validité basée sur les processus de réponses ?
Quelles sont les 3 manières de la mesurée ?
Vérification de l’adéquation entre les attributs psychologiques réellement utilisés et ceux supposés par le test.
- analyse du temps de réponse
- analyse des mouvements oculaires
- cognitive interview
Qu-est ce que la validité basée sur la structure interne du test ?
Comment est-ce mesuré ?
Vérification de l’adéquation entre la structure actuelle interne et la structure théorique du test.
- évaluation des corrélations entre les items qui sont censés évalué les mêmes attributs
- AFE/ AFC des variances pertinente et non pertinente
Qu’est-ce que la validité associée avec des variables externes ?
Stratégie la plus utilisées pour vérifier l’adéquation des relations entre l’attribut supposé et des variables externes. Si un enfant est bon pour qq chose, il doit être bon dans ce qui évalue la même chose.
- validité convergente : différentes proposition mais on retiens que la corrélation doit être > 0.40 pour être interprétée comme forte et pour que l’on soit d’accord pour attribuer le même attribut
- validité discriminante : on souhaite que la corrélation soit la plus faible possible pour évaluer le moins d’attributs distinct : autour de .10
- validité concourante -prédictive : aussi pour évaluer les attributs distincts
Qu’est ce que la validité des conséquences d’utilisation du test ?
Validité très discutée. Les conséquences positives doivent êtres supérieures aux négatives.
On regarde les conséquences attendues (bénéfice) et on compare aux non attendues (+ et -).
Conséquences ≠ biais du test
Sur quelle validité nous pourrions hypothétiquement nous baser ? Que est le problème ?
Sur la validité clinique discriminative, mais c’est un problème psk on ne base généralement sur une population américaine, et en l’absence de données je n’ai pas de raison de penser que les données américaines s’appliquent aux données genevoises.
Quels sont les facteurs influençant la validité des scores selon la TCT (th classique des tests) ?
- L’échantillon (dans le sens de la population)
- La taille de l’échantillon : la validité augmente avec l’augmentation de la taille de l’échantillon, ou sinon on peut mesurer la validation croisée entre différentes études
- L’ hétérogénéité de l’échantillon : validité diminue avec l’homogénéité
- La fidélité : si elle chute, la validité aussi : validité max = √fidélité
Comment calculer au mieux la corrélation : r (motiv - académique) ?
On ne fait pas juste le calcul sinon on ne prend pas en compte la fidélité. Il faut :
r (motiv - académique)
= [r (perf - motiv)]/ (√rxx*ryy)
rxx : coef de fidélité perf académique
ryy : coef de fidélité de la motiv
Quelles sont les controverses et limites autour de la validité ?
- corrélation test - critère : preuve ultime de l’interprétation de l’attribut du test
- critère unidimensionnel et fidèle rarement évalué
- critère remplace l’attribut
- corrélation vs causalité
- validité de quoi ? interprétation/ propriété du test/ …
- validité : quantitatif vs qualitatif
