Traduction: G.M.
Un article qui sort un peu du cadre de l'actualité scientifique de l'autisme, mais qui peut avoir son utilisé dans la scolarisation de tous les élèves
Nous ne pouvons pas nous rappeler assez souvent que les prédictions
pour l'éducation tirées des sciences de l'apprentissage qui, évidemment, doivent fonctionner à 100% ... ne marchent souvent pas.
Le dernier exemple provient d'un article récent faisant état d'un
essai contrôlé randomisé de pratiques adaptatives à l'opposé des pratiques statiques dans
les écoles néerlandaises.Il semble évident que la pratique adaptative sera supérieure à la statique. Dans
la pratique statique, chaque élève reçoit le même ensemble de matériels
de difficulté calibré: facile, moyen, dur, avec difficulté défini par
la performance d'une grande cohorte d'étudiants. Dans
l'algorithme adaptatif, la proportion de questions correctement résolue est prise en compte dans la probabilité de voir un type particulier de
question: si un élève reçoit toutes les questions faciles, quel est le
but de poser plus? Pourquoi ne pas passer à un contenu plus difficile?
We cannot remind ourselves often enough that
the predictions for education drawn from the learning sciences that
obviously, 100%, HAVE to work…often don’t.
The latest example comes from a recent paper reporting a randomized control trial of adaptive vs. static practice in Dutch schools.
It seems self-evident that adaptive practice will be superior to static. In static practice, each student receives the same set of practice materials of graded difficulty: easy, medium, hard, with difficulty defined by the performance of a large cohort of students. In the adaptive algorithm, the proportion of questions correctly answered is factored into the probability of seeing a particular type of question: if a student is getting all of the easy questions right, what’s the point of posing more? Why not move on to more challenging content?
The latest example comes from a recent paper reporting a randomized control trial of adaptive vs. static practice in Dutch schools.
It seems self-evident that adaptive practice will be superior to static. In static practice, each student receives the same set of practice materials of graded difficulty: easy, medium, hard, with difficulty defined by the performance of a large cohort of students. In the adaptive algorithm, the proportion of questions correctly answered is factored into the probability of seeing a particular type of question: if a student is getting all of the easy questions right, what’s the point of posing more? Why not move on to more challenging content?
La pratique adaptée est l'une des raisons pour lesquelles l'apprentissage personnalisé devrait conduire à une plus grande réussite.
Adaptive practice is one of the reasons offered that personalized learning ought to lead to greater achievement.
L'expérience
a testé 1 051 élèves néerlandais de la 7ème à la 9ème année étudiant soit le
néerlandais, la biologie, l'histoire, soit l'économie au cours d'une
année universitaire. L'affectation à la pratique statique ou adaptative a été attribuée par classe, et les étudiants ignoraient les conditions. Tous
les élèves ont reçu le même enseignant (un hybride d'un environnement
numérique et un manuel traditionnel) et tous les devoirs étaient les
mêmes. La variable indépendante n'a été mise en œuvre que lors d'une pratique supplémentaire; Les étudiants ont été invités à pratiquer au moins 15 minutes par
semaine, mais pas de pratique autre que celle prise à leur initiative.
The
experiment tested 1,051 Dutch 7th-9th graders studying either Dutch,
Biology, History, or Economics over the course of one academic year.
Assignment to static or adaptive practice was assigned by classroom, and
students were blind to condition. All students received the same
instruction (a hybrid of a digital environment and traditional paper
textbook) and all homework was the same. The independent variable was
implemented only through extra practice; students were asked to
practice at least 15 minutes per week, but any more practice than that
was taken at their own initiative.
Nous pourrions nous attendre à ce que, parce que les étudiants pratiquent de leur propre initiative, ils utiliseront moins le programme adaptatif, étant donné que les problèmes seront probablement plus difficiles. La proportion d'étudiants qui ont utilisé le module de pratique ne différait pas entre les conditions, oscillant autour de 90% dans les deux cas. Les étudiants dans la condition d'adaptation ont effectivement eu des problèmes plus difficiles et ils ont également pratiqué un peu plus longtemps par session ... mais ils ont travaillé moins de problèmes que les étudiants dans l'état statique. On peut supposer que des problèmes plus difficiles nécessitaient plus de temps par problème.
We might expect that, because
students are practicing at their own initiative, they will use the
adaptive program less, given that the problems will likely be more
difficult. The proportion of students who used the practice module did
not differ between conditions, hovering around 90% in both cases.
Students in the adaptive condition did indeed work more difficult
problems and they also practiced a little bit longer per session…but
they worked fewer problems than students in the static condition.
Presumably, more difficult problems required more time per problem.
Néanmoins, ils n'ont montré aucun avantage sur un test sommatif. En fait, les étudiants mieux préparés (ceux qui ont passé le test sommatif avant l'expérimentation) ont été légèrement affectés négativement par le régime adaptatif par rapport au statique. (Il n'y avait aucun effet pour les étudiants qui avaient échoué au dernier test sommatif).
Nevertheless,
they showed no advantage on a summative test. In fact, better prepared
students (those who had passed the summative test before the experiment
began) were slightly negatively impacted by the adaptive
regimen compared to the static. (There was no effect for students who
had failed the last summative test.)
Les entrevues postérieures à l'expérimentation ont montré que les élèves ne savaient pas si leurs pratiques avaient été adaptées ou statiques et n'avaient aucune différence dans l'attitude des élèves vis-à-vis de la pratique.Pourquoi n'y avait-il pas un effet positif sur les tests adaptatifs?
Post-experimental interviews
showed that students did not know whether their practice had been
adaptive or static, and showed no difference in students’ attitudes
towards the practice.
Why was there not a positive effect of adaptive testing?
Why was there not a positive effect of adaptive testing?
Une possibilité est la faible dose. L'intervention était seulement de 15 minutes par semaine et bien que les étudiants aient pu pratiquer davantage, peu l'ont fait. Dans le même temps, l'intervention a duré toute une année scolaire, le N était assez important et un effet a été observé (dans le sens inattendu) pour les étudiants mieux préparés.
One
possibility is low dosage. The intervention was only 15 minutes per
week and although students could have practiced more, few did. At the
same time, the intervention lasted an entire school year, the N was
fairly large, and an effect was observed (in the unexpected direction)
for the better prepared students.
Une autre possibilité est que le programme a été efficace pour apporter des problèmes difficiles pour les étudiants, mais inefficace dans l'enseignement. Les étudiants en situation d'adaptation ont vu des problèmes plus difficiles, mais ils ont eu beaucoup mal. Peut-être qu'ils avaient besoin de plus de soutien et d'instruction à ce moment-là, de sorte que le bénéfice potentiel de l'élargissement de leurs connaissances et leurs compétences n'a pas été réalisé.
Une autre possibilité est que le programme a été efficace pour apporter des problèmes difficiles pour les étudiants, mais inefficace dans l'enseignement. Les étudiants en situation d'adaptation ont vu des problèmes plus difficiles, mais ils ont eu beaucoup mal. Peut-être qu'ils avaient besoin de plus de soutien et d'instruction à ce moment-là, de sorte que le bénéfice potentiel de l'élargissement de leurs connaissances et leurs compétences n'a pas été réalisé.
Another possibility is that the
program was effective in getting challenging problems to students, but
ineffective in providing instruction. Students in the adaptive condition
saw more difficult problems, but they got a lot of them wrong. Perhaps
they needed more support and instruction at that point, so the potential
benefit of stretching their knowledge and skills was not realized.
Une autre possibilité est que le groupe adaptatif aurait montré un avantage sur une mesure de résultat différente. Comme l'indiquent les auteurs, le test sommatif ressemblait davantage à la pratique statique que la pratique d'adaptation. Peut-être que le groupe d'adaptation aurait montré un avantage dans leur état de préparation et leur capacité à apprendre dans l'unité suivante.
Another
possibility is that the adaptive group would have shown a benefit on a
different outcome measure. As the authors note, the summative test was
more like the static practice than the adapative practice. Perhaps the
adapative group would have shown a benefit in their readiness and
ability to learn in the next unit.
Ce résultat ne montre manifestement pas que la pratique de l'adaptation est une mauvaise idée ou ne peut pas faite pour mieux fonctionner. Cela ajoute simplement à la liste des idées qui semblent être plus ou moins infaillibles et que se rélèvent ne pas l'être: pensez au programme en spirale ou aux manuels électroniques. Penser et apprendre est tout simplement trop compliqué pour que nous puissions prédire en toute confiance comment un changement dans une variable affectera l'ensemble des systèmes cognitifs et conatifs.
Ce résultat ne montre manifestement pas que la pratique de l'adaptation est une mauvaise idée ou ne peut pas faite pour mieux fonctionner. Cela ajoute simplement à la liste des idées qui semblent être plus ou moins infaillibles et que se rélèvent ne pas l'être: pensez au programme en spirale ou aux manuels électroniques. Penser et apprendre est tout simplement trop compliqué pour que nous puissions prédire en toute confiance comment un changement dans une variable affectera l'ensemble des systèmes cognitifs et conatifs.
This result
obviously does not show that adaptive practice is a bad idea, or cannot
be made to work well. It simply adds to the list of ideas that sound
like they are more or less foolproof that turn out not to be: think
spiral curriculum, or electronic textbooks. Thinking and learning is
simply too complicated for us to confidently predict how a change in one
variable will affect the entire cognitive and conative systems.
