Recyclage de questions à choix multiples d’épreuves certificatives de physique en items de tests formatifs en ligne

Depuis septembre 2012, en Fédération Wallonie-Bruxelles de Belgique, les étudiants inscrits en première année de bachelier en médecine sont interrogés sous forme de questions à choix multiples lors des épreuves certificatives des cours scientifiques donnés au premier quadrimestre de leurs études.
Au Département de Physique de l’Université de Liège, les questions des examens antérieurs sont répertoriées, et éventuellement améliorées, afin d’être réutilisées dans le cadre d’un outil d’entraînement en ligne, appelé « simulateur d’examens » (Marique, 2015). Cet outil est destiné à améliorer des connaissances directement en lien avec une stimulation constante de la mémoire des étudiants à l’aide de QCM.
Les questions sont analysées de 2 façons différentes : d’une part sur base des résultats des étudiants lors de l’examen (indice de facilité P et P’ et indices de discrimination B et D) et d’autre part, par une évaluation effectuée par les membres de l’équipe pédagogique. Ceux-ci attribuent un niveau de difficulté à chaque question en fonction de 4 critères empiriques : abstraction, réflexion, mixité, mathématiques. Chaque évaluateur attribue une note de 1 à 3 à chacun des critères. La somme obtenue indiquera le niveau de difficulté total de la question selon une règle simple.
A l’avenir, dans une perspective d’amélioration du classement par niveau des questions disponibles dans le simulateur d’examens, la concordance entre l’indice P’ et le niveau de difficulté qui lui a été attribué par l’équipe pédagogique, sera étudiée.
L’impact de ce système sur l’apprentissage des étudiants fait actuellement l’objet d’un suivi particulier et précis. Toutes les tentatives des étudiants et leurs résultats sont enregistrés systématiquement en prévision d’une analyse des effets de ce système.