Plus 127 of min 17 procent: de vangrails bepalen of de AI-tutor werkt
In de Nigeriaanse deelstaat Edo kregen ongeveer 800 scholieren in de zomer van 2024 zes weken lang bijles Engels van een chatbot. Twee sessies per week, na schooltijd, onder begeleiding van een docent. Na gemiddeld dertien uur les scoorden zij 0,3 standaarddeviatie hoger dan de controlegroep, becijferde de Wereldbank in een gerandomiseerd experiment. Dat staat gelijk aan anderhalf tot twee jaar regulier onderwijs in vergelijkbare omstandigheden. Het programma presteerde daarmee beter dan 80 procent van alle onderwijsinterventies die ooit rigoureus zijn geëvalueerd.
Rond dezelfde tijd liep op een middelbare school in Turkije een ander experiment, met een omgekeerde uitkomst. Bijna duizend leerlingen kregen bij wiskunde toegang tot GPT-4. Wie de onbewerkte chatbot gebruikte, maakte de oefenopgaven 48 procent beter. Maar op de afsluitende toets, zonder AI, scoorde diezelfde groep 17 procent slechter dan leerlingen zonder chatbot. De studie verscheen in 2025 in vakblad PNAS.
Zelfde technologie, tegengesteld resultaat. Het verschil zat niet in het model, maar in het ontwerp eromheen. In Edo werkten leerlingen met voorgeschreven prompts, een lesplan langs het nationale curriculum en een docent die meekeek. In Turkije draaide ook een tweede variant mee: een tutorversie die hints gaf in plaats van antwoorden, ontworpen met de docenten. Die groep maakte de oefeningen 127 procent beter en het negatieve toetseffect verdween volledig.
Hoe we hier kwamen
Dat individuele begeleiding werkt, is al decennia bekend; dat zij onbetaalbaar was op schaal ook. Project Alithea beschreef eerder hoe dalende inferentiekosten dat prijsprobleem uithollen in een analyse van het 2-sigma-probleem. Zolang bijles mensenwerk was, werd zij verdeeld via de portemonnee. Nederlandse ouders gaven in schooljaar 2018-2019 tussen de 142 en 207 miljoen euro uit aan aanvullend onderwijs voor middelbare scholieren, becijferden SEO en Oberon in opdracht van het ministerie van OCW. Een op de drie leerlingen in het voortgezet onderwijs volgde een vorm van aanvullend onderwijs, een op de acht een betaalde vorm. Betaalde bijles wordt vooral afgenomen door kinderen van hoogopgeleide ouders.
De vraag was dus nooit of persoonlijke begeleiding helpt, maar wie haar kon betalen. Nu de marginale kosten van een tutorgesprek richting nul gaan, verschuift de vraag opnieuw: werkt het ook zonder mens ernaast?
De economie erachter
De drie experimenten samen geven daar een preciezer antwoord op dan de losse krantenkoppen. Ten eerste verschuift de waarde van het model naar de didactische laag erbovenop. Aan Harvard vergeleken natuurkundedocenten hun eigen actieve werkcolleges met een zelfgebouwde AI-tutor vol vakspecifieke opdrachten en vangrails. De AI-groep leerde ongeveer twee keer zoveel, met effectgroottes van 0,7 tot 1,3 standaarddeviatie, en was met een mediaan van 49 minuten ook sneller klaar dan de 60 minuten in de collegezaal. Dat resultaat kwam niet van een kale chatbot, maar van maanden ontwerpwerk door docenten.
Ten tweede is er een reëel rebound-risico. Zonder vangrails gebruiken leerlingen het model als antwoordmachine: de productie stijgt, het leren daalt. De Turkse min 17 procent is precies het patroon dat ook bij andere goedkope technologie opduikt: wat bijna gratis is, wordt overconsumeerd, en het gemak verdringt de inspanning waar het leereffect vandaan komt.
Ten derde is de verdeling niet automatisch gelijk. In Edo profiteerden meisjes en leerlingen met een hogere begintoets het meest. Stroom en internet blijven een voorwaarde: de sessies in Nigeria haperden geregeld op beide. Goedkope tutoring kan kansenongelijkheid dus eerst vergroten voordat zij die verkleint, omdat de best toegeruste leerlingen en scholen de winst het eerst binnenhalen.
Implicatie voor de onderwijs-stack
Voor de onderwijs-stack is de conclusie ongemakkelijk en hoopvol tegelijk. De schaarste aan persoonlijke begeleiding was een prijsprobleem, en die prijs verdampt. Maar de flessenhals verdwijnt niet, hij verschuift: van de tijd van de tutor naar het didactisch ontwerp en naar de docent die het gebruik bewaakt. Een school die alleen licenties koopt, koopt de min 17 procent. Een school die lesplannen, prompts en hints laat ontwerpen door docenten, koopt de plus 0,3 standaarddeviatie. Dat patroon, goedkope techniek met een verschoven flessenhals, keert in vrijwel elke stack terug zie de ontwikkelingen-feed.
Wat te volgen
Drie indicatoren voor de komende twaalf maanden. Eén: de vervolgmetingen uit Edo State, die moeten laten zien of de leerwinst standhoudt na zes weken en bij opschaling naar meer scholen en vakken. Twee: of Nederlandse scholen en uitgevers kiezen voor tutorbots met docent-ontworpen hints of voor open chatbots zonder vangrails, en wat de eerste Nederlandse effectstudies daarover melden. Drie: de uitgaven aan betaald schaduwonderwijs in Nederland. Dalen die zodra een goed gratis alternatief bestaat, dan werkte de prijs als enige slot op de deur. Blijven zij stijgen, dan is betaalde bijles ook een statusgoed, en lost goedkope techniek dat niet op.