Amsterdamse wetenschappers hebben onderzoek gedaan naar de perceptie van AI en de realiteit ervan. Kinderen blijken vaak te denken dat AI veel slimmer is, maar zeker als het om redeneren en nieuwe informatie gaat, dan delven ChatGPT en co het onderspit.
Onderzoekers van de Universiteit van Amsterdam hebben om te onderzoeken hoe kinderen denken over AI en hoe het werkelijk is een denkpuzzelwedstrijd gehouden. Er moesten letterreeksen worden afgemaakt: als ab ineens ac werd, wat was dan de bedoeling met gh? AI moest daarbij dezelfde opdracht doen als de kinderen. Geheel tegen de voorspelling van de kinderen in wonnen ze zelf in plaats van de kunstmatige intelligentie.
Kinderen presteren consistenter
De kinderen waren gemiddeld acht en moesten verschillende van de hierboven uitgelegde puzzels oplossen, terwijl ChatGPT en nog drie AI-hulpjes hetzelfde deden. Wat blijkt? Het moderne alfabet gaat AI-bots goed af, maar het Griekse alfabet en symbolen waren de AI te snel af. De kinderen bleven consequent goed in alle opdrachten. Het verschil was bovendien op sommige fronten enorm: waar kinderen gemiddeld op 67 procent uitkwamen, daar behaalden sommige AI-modellen nog geen 20 procent.
Hoofdonderzoeker Claire Stevenson zegt tegen Trouw dat AI sterk is in feitjes, waardoor het De Slimste Mens heel goed zou kunnen winnen, maar nieuwe kennis aanleren zonder dat het de context kent? Dat is een zware dobber voor AI, terwijl kinderen even goed scoren op alle punten. Dat komt mede omdat kinderen vanaf vier jaar letter- en symboolreeksen kunnen afmaken, ongeacht welk symbool. Een ‘computer’ raakt hierbij eerder in de war. Stevenson stelt dan ook dat zelfs heel geavanceerde AI-modellen niet rijp zijn om de menselijke intelligentie na te bootsen.
Onderzoek in NEMO
Stevenson heeft in de zomer in wetenschapsmuseum NEMO het onderzoek gedaan. Als kinderen dan uit het onderzoek kwamen, riepen ze zelf uit dat ze die robot eigenlijk best dom vonden en dat ze zelf beter kunnen. Een goede boost voor het zelfvertrouwen van het kind, maar ook voor de hoop van Stevenson, die graag zou zien dat kinderen AI minder gebruiken, zeker als het om huiswerk gaat.
Stevenson geeft aan: “Zelfs jonge kinderen begrijpen intuïtief dat een alfabet een geordende reeks is. AI-modellen missen dat abstracte inzicht. Ze herkennen vooral patronen uit bekende situaties. Als de context verandert, lukt het niet om die onderliggende structuur mee te nemen.” In januari wordt meer over het onderzoek uitgediept in het vakblad TACL, maar is hier al te lezen.
Lees meer over wetenschap en word lid van de Bright-nieuwsbrief.
Over de auteur
