htp://smart.ulg.ac.be [email protected] +32 4 366 20 78
DESCRIPTION
htp://www.smart.ulg.ac.be [email protected] +32 4 366 20 78. 8 novembre 2006. Le modèle CGQTS en action : le cas d ' un examen certificatif standardisé créé à l ' aide de la plateforme « electronic Construction & Quality Control in Standardized Testing ». Mainferme R. Crahay V. - PowerPoint PPT PresentationTRANSCRIPT
![Page 1: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/1.jpg)
htp://www.smart.ulg.ac.be
[email protected]+32 4 366 20 78
Le modèle CGQTS en action : le cas d'un examen certificatif standardisé
créé à l'aide dela plateforme « electronic
Construction & Quality Control in Standardized Testing »
Mainferme R.
Crahay V.
8 novembre 2006
![Page 2: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/2.jpg)
Cours de Psychologie Éducationnelle
229 étudiants : quelle(s) modalité(s) d’examens ?
![Page 3: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/3.jpg)
Cote finale Travail de groupe « présentation en octuor »= 50%
Test standardisé « papier crayon » = 50%
• Questionnaire à choix multiple
• Avec degrés de certitude
• Avec solutions générales implicites
• Avec possibilité de justifications écrites
Un exemple d’utilisation : l’examen du cours de Psychologie Éducationnelle (ULg)
![Page 4: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/4.jpg)
Coordonner le travail en équipe
Assurer un suivi collectif des tâches réalisées
Centraliser le travail
Besoin d’une structure de travail collectif
Testing standardisé dans le cadre du cours de Psychologie Éducationnelle : Un travail collaboratif
![Page 5: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/5.jpg)
La plateforme e-C&QCST : Un outil en ligne pour construire et gérer les évaluations
![Page 6: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/6.jpg)
Répartition des tâches
La plateforme e-C&QCST : Un identifiant et un type d’accès pour chacun
Acteur 1
Acteur 2
Acteur 4
Acteur 5
Acteur 3
![Page 7: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/7.jpg)
Testing standardisé dans le cadre du cours de Psychologie Éducationnelle : une volonté de qualité
Faire le point sur les objets du cours à évaluerAdoption de la démarche CGQTS
Assurer une cohérence et une vision partagée et centralisée de ces objets au niveau de l’équipe
Communiquer ces objets aux étudiants
Besoin d’un outil de communication central permettant de formaliser la matière à évaluer
![Page 8: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/8.jpg)
La plateforme e-C&QCST : Étape 1 : Création d’une table de spécification
Relier les Points Enseignés et les Catégories de Performance [PE x CP]
Construction du binôme [PE x CP] Validité
CP Priorités
PE
![Page 9: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/9.jpg)
Étape 2 : Les Modalités des Questionnement (MQ)
Définir les modalités de questionnement (MQ)
Choisir les modalités de questionnement selon les objectifs de l'évaluation
Les Modalités de questionnement sont composées de :
- Un Format de Questionnement [FQ] :
QCM, VF, VFG, QCL
- Une série d’Options de Questionnement [OQ]
SGI 6, SGI 7, SGI 8, SGI 9, DC, LO
![Page 10: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/10.jpg)
CP x MQ
PE x CP x MQ
![Page 11: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/11.jpg)
Étape 3 : La rédaction des questions
Répartir les tâches et les objets (ciblés et priorisés) à évaluer
Sept tests formatifs de 10 questions (1 par chap.)
Un test certificatif
Une nécessaire validation par le Responsable de l’Évaluation (RE)
Obtenir rapidement un nombre suffisant de questions afin d’alimenter une banque à
exploiter dans les évaluations formatives et sommatives
![Page 12: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/12.jpg)
La plateforme e-C&QCST:La rédaction des questions
![Page 13: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/13.jpg)
![Page 14: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/14.jpg)
Étape 4 : Information/entrainement des étudiants :
Entraînement individuel
- à la Matière évaluée
- au dispositif d’évaluation (QCM, SGI, DC)
Permettre à l’évaluateur un suivi qualitatif des apprentissages de son groupe d’étudiants
Nécessité de préparer les étudiants à l’examen :
TESTS FORMATIFS / D’ENTRAÎNEMENT
![Page 15: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/15.jpg)
La plate-forme e-C&QCST :Les tests formatifs
![Page 16: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/16.jpg)
Informer les étudiants :
vers un « engagement docimologique »
![Page 17: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/17.jpg)
La plate-forme e-C&QCST :Les tests formatifs
![Page 18: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/18.jpg)
La plate-forme e-C&QCST:Un suivi des tests formatifs
![Page 19: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/19.jpg)
Assurer un maximum de qualité à l’examen sommatif
Étape 5 : La construction de l’épreuve
35 questions dont 7 proviennent des tests d’entraînement (elles ont été validées sur base de leur r.bis)
Équilibrer l’examen (SGI vs Réponses classiques)
Impression des différentes formes (4)
![Page 20: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/20.jpg)
![Page 21: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/21.jpg)
L’examen
Examen « papier – crayon » (250 étudiants)
Feuilles de justification
![Page 22: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/22.jpg)
Étape 6 : La correction
Obtenir de nouvelles informations sur la qualité des questions
Obtenir différents résultats :
- graphiques, moyennes, écart-type;
- résultats spécifiques en cas de suppression de question (s) ou de changement degré de sévérité
![Page 23: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/23.jpg)
La plateforme e-C&QCST:La correction
Résultats et Statistiques :
![Page 24: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/24.jpg)
La plate-forme e-C&QCST:La correction
Gestion Qualité du test :
![Page 25: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/25.jpg)
La plateforme e-C&QCST:La correction
Gestion Qualité de l’évalué :
![Page 26: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/26.jpg)
Conclusion
Travail collaboratif
Gain de temps au niveau de la création des questions (Impression)
Temps élevé de préparation mais gain de temps gagné pour les années prochaines
Feuilles de justification
![Page 27: htp://smart.ulg.ac.be smart@ulg.ac.be +32 4 366 20 78](https://reader035.vdocuments.us/reader035/viewer/2022062304/568135d5550346895d9d4471/html5/thumbnails/27.jpg)
Perspectives
Vers un outil AMS…