In de VS verdeelt het ESSA-kader EdTech-bewijs in vier niveaus. Niveau 4 is de onderste. Het vraagt alleen om een op onderzoek gebaseerde onderbouwing en zegt weinig over hoe je die bouwt. De kwaliteit wisselt dus sterk. Een nieuw papier van Kucirkova, Vahey, Patterson en Dockterman, samengevat door EdTech Partnerships, stelt dat niveau 4 veel meer kan zijn dan de onderste trede van een bewijsladder. Wij denken dat ze gelijk hebben, en de reden geldt ver buiten de VS.
Achteraf bewijs bij elkaar zoeken
Het papier benoemt iets waar elk EdTech-bedrijf wel eens in gelokt wordt. Je bouwt een feature en zoekt daarna onderzoek die hem lijkt te ondersteunen. Hij heeft feedback, dus is hij gebaseerd op leertheorieën. De auteurs noemen dit een soort reverse engineering van bewijs. Het ziet er wetenschappelijk uit. Het verandert niets.
Onderzoek pas zoeken nadat je een feature bouwde is reverse engineering, geen bewijs.
De methode die ze voorstellen
Vijf stappen. Doe een snelle literatuurstudie. Accepteer verschillende soorten onderzoek, kwalitatief en kwantitatief, conceptueel en empirisch, zolang het maar rigoureus en relevant is. Weeg hoe sterk en hoe toepasbaar het bewijs is. Kijk waar het product aansluit bij het onderzoek en waar niet. Maak daar dan een theory of change en een onderzoeksroadmap van.
De stap die er het meest toe doet
Stap vier is de eerlijke. Waar sluit het product niet aan bij het onderzoek? In de casestudie uit het papier scoorde een leesapp genaamd I Can Read goed op leescomponenten en minder goed op woordenschat. Het team veranderde daarom de activiteiten. Dat is het hele punt. Bewijs dat het product nooit verandert is versiering.
Meer kaders lossen het niet op
Er zijn meer dan 75 bewijskaders en certificeringen wereldwijd. Nog een badge helpt een school niet kiezen. Wat helpt is een bedrijf dat zijn redenering laat zien, inclusief de delen waar het onderzoek zegt dat het er nog niet is, plus een plan om het uit te zoeken.
Wat je vraagt
Ben je een school of een ouder, stel elk EdTech-bedrijf drie dingen. Op welk onderzoek is jullie product gebaseerd? Waar sluit jullie product er nog niet bij aan? En wat hebben jullie daardoor veranderd? Een goed antwoord op de tweede vraag vertelt je meer dan een badge. Dat is ook de maatstaf waarop wij gemeten willen worden.
Neem dit mee
- 1Onderzoek pas zoeken nadat je een feature bouwde is reverse engineering, geen bewijs.
- 2De bruikbare stap is vinden waar een product nog niet aansluit bij het onderzoek.
- 3Bewijs moet leiden tot veranderingen in het product.
- 4Vraag elk EdTech-bedrijf wat het door het onderzoek heeft veranderd.
