Evaluation par QCM dans l'enseignement supérieur
Par Mathoman, lundi 7 juin 2010 à 15:00 - Enseigner les maths - Tags
Dans mon dernier billet sur l'enseignement des mathématiques je parlais du système américain et allemand des devoirs maison hébdomadaires. Je me félicite du succès de ce billet : en effet, les responsables de l'enseignement des maths en cycle préparatoire à l'école d'ingénieurs Estaca l'ont lu et ont décidé la mise en place de ce système à partir de la rentrée prochaine.
Aujourd'hui j'aimerais parler d'une autre idée pour rendre plus efficace le contrôle des acquis des étudiants : les questionnaires à choix multiples. Traditionnellement nous, les matheux, nous n'aimons pas les QCM. Nous considérons les mathématiques comme une sorte d'art où le chemin du raisonnement choisi et la grâce avec laquelle on danse sur ce chemin, c'est-à-dire le style de rédaction, sont aussi importants que le résultat à trouver. Et cela ne peut pas être évalué par un QCM.
C'est vrai. Or quand nous corrigeons les partiels en premier cycle nous faisons souvent l'expérience que très peu d'étudiants savent rédiger correctement une suite d'idées. Et la remarque suivante montre que ce phénomène perdure même dans les semestres supérieurs : L’utilisation des hypothèses données dans l’énoncé doit être signalée au moment opportun et non en vrac en début de question, afin de montrer l’articulation du raisonnement
(extrait du rapport du jury de l'agrégation 2009).
Il y a donc un décalage entre nos attentes et les résultats. Et ce n'est pas étonnant car le système des TD actuel n'apprend une rédaction cohérente. Comme le professeur de TD ne peut pas contrôler l'écrit de chacun, les étudiants ne font que recopier une rédaction exemplaire au tableau ce qui est déjà une bonne chose mais ne suffit point, ça serait comme si on voulait apprendre à jouer le violon en écoutant Gidon Kremer. On revient donc au problème déjà cité de l'efficacité des TD...
Alors à quoi bon d'évaluer les étudiants par des choses sur lesquelles ils n'ont pas eu l'occasion de s'entraîner ? J'ai donc décidé, pour ma part, de faire désormais l'évaluation en forme de QCM (dans les établissements qui n'ont pas mis en place un système de correction de devoirs maison). Mon premier tel examen 100% QCM peut être consulté ici.
Quelles sont les compétences mathématiques qu'on peut évaluer par un QCM ? A mon avis, un bon pourcentage des méthodes au programme d'un premier cycle en école d'ingénieur ou en tronc commun de L1 : dériver, intégrer, systèmes linéaires, équations différentielles linéaires, etc. D'après ce que j'ai vu c'est déjà suffisant pour trier les bons et les mauvais étudiants ;-)
Recherche de collaborateurs
Maintenant je viens avec une proposition concrète : qui a envie de participer à établir une base d'exercices en ligne en forme de QCM ? Qui est-ce qui a déjà de l'expérience en ce domaine (peut-être avec WIMS) et souhaite la partager ? L'idée serait la suivante.
- Une grande base de questions serait disponibles en ligne pour que les étudiants puissent s'entraîner chez eux.
- Une autre partie de questions serait reservée aux épreuves que les étudiants passent dans les salles d'ordinateur le jour de l'examen.
- Les résultats étant calculés automatiquement il n'y aura plus de travail de correction ni erreur d'évaluation possible.
- Une fois la base d'exercices créée et assez grande, on peut la rentabiliser et organiser des évaluations très fréquentes...
- Les exercices ne devraient pas forcément être interactives, originales ou d'une grande valeur pédagogique en e-learning (comme souvent dans WIMS), car ils serviraient uniquement à évaluer, l'enseignement en TD restant inchangé.
Pourquoi ne pas lire aussi :
La notation binaire
Par Mathoman - Tags
Ceux qui ont vu le film Matrix se rapellent des suites constituées des chiffres 0 et 1 qui défilent sur l'écran presque interminablement, comme par exemple 10011100100001101010111111. Beaucoup appellent cela un "nombre binaire", mais cette appellation est mal choisie, mieux est de l'appeler "écriture binaire d'un nombre naturel". Pour mieux comprendre cette écriture bizarre faisons un petit détour.
Les nombres naturels
Les nombres naturels sont le premiers que nous avons appris à l'école : zéro, un, deux, trois, quatre,... Il y en a une infinité, car à chaque nombre on peut ajouter 1 :
zéro = 0 , un = 1 , deux = 1+1 , trois = 1+1+1, quatre = 1+1+1+1 , etc.
Cette écriture en forme de somme est essentiellement la même que l'écriture primitive par bâtons qu'on trouve sur les murs des prisons : par exemple |||| pour quatre ou |||| ||| pour huit. Elle prendrait trop de place pour des grands nombres. Pour éviter cela on utilise une ruse, que j'illustre d'abord par quelque chose que tout le monde connaît et utilise :Le système décimal
Il fonctionne comme suit.
- Nous convenons que les dix premiers nombres (zéro, un, deux, trois, ..., huit, neuf) soient représentés par les dix symboles 0, 1, 2, 3, ..., 8, 9.
- Nous convenons que le onzième nombre, à savoir le 9+1 ou encore le dix, est représenté par la juxtaposition de 1 et de 0 : donc 10.
- Puis on donne une règle pour les autres juxtapositions en utilisant les puissances de 10. Voici deux exemples:
et
.
signifierait le nombre sept et
signifierait
(c'est-à-dire
dans notre système décimal habituel).Dans toutes les langues que je connais il y a les noms particuliers "onze" et "douze" ; on dit "vingt-deux", mais on ne dit pas "dix-deux", on dit "douze". Cela montre qu'il fût un temps où nous ne comptions pas dans en dizaines mais en douzaines.
Le système binaire
Maintenant au lieu de prendre dix chiffres nous nous contentons du minimum syndical, des deux chiffres 0 et 1. C'est vraiment le minimum car avec un seul chiffre nous ne pourrions pas aller très loin, nous serions restreints à la notation primitive par bâtons |||| .
La juxtaposition
signifie alors le nombre deux et
signifie
, c'est-à-dire
, donc cinq dans notre système décimal habituel.Ecrivons quelques nombres naturels dans les deux systèmes, binaire suivi de décimal :
0 est 0, 1 est 1, 10 est 2, 11 est 3, 100 est 4, 101 est 5, 110 est 6, 111 est 7, 1000 est 8, etc.
est
,
est
,
est
(un méga)Ces derniers nombres sont très familiers en informatique. C'est simplement parce que les ordinateurs utilisent le système binaire pour compter. En effet, la manière la plus simple pour communiquer avec une machine c'est de lui donner seulement deux signaux (et pas trois ou plus), comme oui/non, comme on/off, comme gauche/droite (dans les leviers de la machine en bois) ou comme haut/bas, etc.
Exemples de passage d'un système à l'autre
Résumons par deux exemples les règles qui permettent de passer du système binaire au système décimal :
- Soit
un naturel écrit dans le système binaire. Alors dans le système décimal c'est le nombre 
- Soit
un naturel écrit dans le système décimal (!). Pour le transformer en écriture binaire nous devons d'abord trouver la plus grande puissance de 2 qui "rentre" dans
. Nous savons que
et que
. Donc
est la plus grande puissance de 2 qui "rentre" dans
et ainsi l'écriture binaire de
nécessitera onze chiffres le premier étant 1. Nous avons
La plus grande puissance de 2 qui "rentre" dans
est
On est passé de la dixième puissance directement à la sixième ; les trois puissances "sautées" (neuvième, huitième, septième) sont représentées par des zéros. Donc l'écriture binaire de notre nombre commence par les cinq chiffres
On poursuit de la même manière :
; la plus grande puissance de 2 qui "rentre" dans
est
Puis
; la plus grande puissance de 2 qui "rentre" dans
est
. Le dernier reste est
Ainsi nous obtenons
(notation binaire). - Pour nous rassurer de notre dernier résultat faisons le test et re-transformons l'écriture binaire en écriture décimale. Le nombre
en binaire devient en décimal
donc
(notation décimale).
Niveau en math des bacheliers entrant en fac de sciences
Par Mathoman - Tags
Une petite erreur de calcul d'ordre 1010
On peut lire ici et là que la dette de l'état allemand a baissé considérablement en une seule journée. En fait, la comptabilité d'une banque allemande nationalisée en 2009 lors de crise financière a fait une "petite erreur", elle a pris pour une dette ce qui était en réalité un avoir ! Du coup l'état allemand a "gagné" d'un seul coup 55,5 milliards d'euros. C'était juste une petite faute de signe...
Ce "fait divers" du monde des finances sert comme introduction à ce billet sur le niveau de math des bacheliers français d'aujourd'hui, et plus particulièrement de ceux qui se destinent à des études scientifiques. Cette année j'enseigne, entre autres, à deux groupes de première année de licence en sciences (au total une cinquantaine d'étudiants). Puisque j'ai remarqué qu'un bon nombre des étudiants ne sait pas calculer avec des pourcentages et des puissances, j'ai consacré la première semaine à cela. Ce n'est pas vraiment prévu dans un programme qui porte sur les nombres complexes, l'algèbre linéaire, etc. Mais je suis de l'avis qu'un futur chimiste ou physicien doit savoir répondre à une question comme celle-ci : "Si la demi-vie d'une certaine substance radioactive est de 30 ans, quel est le pourcentage de diminution par an?"
Exemples de copies d'étudiants en première année d'université
Au mois d'octobre j'ai posé ce contrôle (45 minutes). Toutes les questions avaient été traitées en cours et TD, avec des énoncés identiques ou similaires (voir le polycopié du cours). Ce n'est donc pas surprenant qu'il y avait quelques très bonnes notes. Mais d'autre part le nombre de copies dépourvues de sens était tellement grand que cela m'inquiète. Avant de poursuivre la lecture de ce billet vous êtes priés de vous faire une idée vous-même en consultant quelques extraits scannés ici :
Quand on corrige de telles copies on est déjà heureux si le résultat est juste, même si l'écriture mathématique qui y conduit est fausse (comme dans cet exemple). Tout le monde fait des erreurs, moi aussi. C'est humain. Mais ici c'est le type d'erreur qui est inquiétant, et leur fréquence. Il y en a trop pour s'en amuser et pour parler de "florilège". Au total il y avait 48 copies (je n'ai pas tout scanné). Les 48 étudiants sont titulaires des bacs suivants: 39 bac S, 1 bac ES, 4 bac STL et 4 bac pro. La majorité des étudiants se destinent aux études de chimie.
Remarques et questions
- Le bac d'aujourd'hui a-t-il encore une valeur? Si oui, laquelle?
- Que dit la Cour des comptes? Il y a un grand gâchis d'argent public si l’Éducation Nationale ne parvient pas à enseigner correctement les opérations de bases +, -, × et ÷.
- Après le bac la gabegie continue puisqu'à la fac on met tous dans le même panier, au lieu de créer des groupes de niveau. (Il est évident qu'avec des cours additionnels de soutien on n'arrive pas à combler ces lacunes du collège.) Pour donner une image : si une école de danse mettait dans un même cours ceux qui doivent apprendre les pas de base et ceux qui exécutent déjà les passes les plus compliquées, alors tous les élèves, les avancés et les débutants, demanderaient de se faire rembourser.
- Est-ce le rôle de l'université d'enseigner les mathématiques de niveau collège?
- Quel rôle jouent les conseillers d'orientation? Pourquoi ces étudiants sont-ils orientés vers les études scientifiques?
- Les programmes scolaires en sciences établis par le ministère de l’Éducation Nationale sont-ils assez stimulants au niveau intellectuel pour attirer les meilleurs élèves vers les études scientifiques (et pas vers les études de droit, de commerce, gestion, etc.)?
- Faut-il faire des contrôles pareils? Supposez vous êtes parent d'un étudiant qui a obtenu 20 points dans ce contrôle et vous voyez le sujet du contrôle, que feriez-vous? Puisque le niveau d'abstraction de ces exercices est adapté à un élève de troisième et pas à un étudiant en première année de faculté de sciences, vous lui conseilleriez certainement de changer d'établissement.
- Peut-on enseigner le calcul dans C et dans Rn à des personnes qui ne savent pas calculer dans R?
- Que faut-il enseigner à un public tellement hétérogène?
- D'après discussions avec des collègues partout en France je sais que ce constat ne concerne pas seulement mon université.
- Faut-il en parler? Ce n'est pas politiquement correct d'affirmer que pas tous les bacheliers sont prêts pour des études supérieures. Si on veut la massification de l'enseignement il faut se donner des moyens efficaces. Faire les mêmes mathématiques pour tous et laisser passer tout le monde n'est apparemment pas la bonne méthode.
- Cette très forte hétérogénéité qui empêche un enseignement efficace (et par suite la réussite des étudiants) n'est pas un phénomène qui ne concerne que la France (voir cet article en provenance des Pays-Bas). On l'attribue en général aux "nouvelles pédagogies". En Allemagne, on fait des constats similaires, pas dans les universités mais dans les FH (sorte de IUT). Lire par exemple cette lettre ouverte qu'un professeur de mathématiques de l'IUT de Berlin adresse à ses étudiants au premier semestre. Là-bas les bons étudiants des semestres supérieurs sont payés pour revoir le programme du collège et du lycée avec certains étudiants de première année repérés au début de l'année par un test sélectif (ils ont même écrit un bon polycopié).
- Même en prépa le niveau est devenu très hétérogène. Les profs ne savent plus sur quelle base recruter tellement la signification des notes au lycée est devenue relative. Récemment en math sup dans un grand lycée parisien, je collais deux élèves ; l'une a très vite compris un exercice qui définit le logarithme complexe (une nouvelle notion pour elle), tandis que l'autre ne savait même pas dessiner la droite d'équation x+y=1 (elle y arrivait seulement après dix minutes, après m'avoir proposé trois faux dessins). Après on lira dans la presse que la prépa humilie les élèves (Bruno Sire)... mais si on y envoie quelqu'un qui n'a aucune base pour y réussir alors n'est-ce pas prévisible que ça crée des frustrations chez un élève qui ne comprend rien tout au long de la journée?
Encore quelques précisions sur ce contrôle :
La moyenne et la médiane des résultats se situent autour de 11, mais elles auraient été un ou deux points inférieures si j'avais corrigé avec une exigence normale.
Il s'agit d'un deuxième contrôle, sorte de rattrapage d'un contrôle très mal réussi par presque tous. En fait,a semaine avant j'avais fait un premier contrôle. Mon frère, matheux qui travaille dans l'industrie d'appareils médicaux, était chez moi en visite et m'a proposé de corriger les copies. Après vingt minutes il était découragé par les copies catastrophiques et disait: "Annule ce contrôle et rends les copies avec le corrigé. Ensuite tu leur dis que la semaine prochaine il y aura un autre contrôle similaire." Ensuite, c'est lui qui a conçu le nouveau sujet, plus simple, dont il est question dans ce billet. Les exercices étaient pratiquement les mêmes que ceux du premier contrôle, seulement encore plus élémentaires. Les étudiants qui n'ont pas réussi n'ont donc soit pas envie d'apprendre, soit ils n'ont pas les capacités de comprendre le corrigé.
