211service.com
Terwijl de gegevens binnenstromen, evolueren massale open online cursussen
In 2012 trokken onderwijsstartups miljoenen studenten - en een golf van belangstelling van universiteiten en de media - door massale open online cursussen of MOOC's aan te bieden. Nu worden enkele kernkenmerken van deze razend populaire cursussen ontleed, waardoor de cursusaanbieders zelf wat kunnen leren. Terwijl deze bedrijven gebruikersgegevens analyseren en experimenteren met verschillende functies, onderzoeken ze hoe ze de leerervaringen van studenten kunnen aanpassen en verzamelen ze een voorraad pedagogische trucs om meer studenten te helpen hun cursussen af te ronden.
De gegevens die we verzamelen zijn ongekend in het onderwijs, zegt Andrew Ng, medeoprichter van MOOC-provider Coursera en een universitair hoofddocent aan de Stanford University. We zien elke muisklik en toetsaanslag. We weten of een gebruiker op het ene antwoord klikt en vervolgens een ander antwoord selecteert, of snel vooruitspoelt door een deel van een video.
Ng en andere grote figuren uit de MOOC-wereld hadden al lang voorzien dat MOOC's een schat aan gegevens zouden opleveren over hoe studenten daadwerkelijk leren. Tot voor kort waren deze kleine bedrijven echter te veel bezig met het opschalen van hun infrastructuur om te voldoen aan de explosief groeiende vraag (zie The Technology of Massive Open Online Courses ) om deze gegevens diepgaand te onderzoeken.
Enkele recente bevindingen hebben aspecten van het ontwerp van MOOC's bevestigd. Onderzoekers van Princeton gebruikten gegevens van Coursera om aan te tonen dat het peer-beoordelingssysteem van het bedrijf, dat cijfers voor cursussen berekent op basis van feedback van andere studenten, effectief is. Andere bevindingen hebben veronderstellingen in twijfel getrokken over hoe een online cursus met succes honderdduizenden studenten of meer kan bedienen.
Sinds MOOC's voor het eerst verschenen, hebben hapklare video's het grootste deel van het onderwijs geleverd, vergezeld van online beoordelingen en oefeningen om de inhoud in de hoofden van studenten te verstevigen. Zowel de gegevens van Coursera als die van Udacity onthullen echter een grote subset van studenten die video's liever overslaan en zo veel mogelijk vooruitspoelen. We zijn begonnen onze cursussen te herstructureren om veel minder video te hebben en sommige video's opnieuw op te nemen, zegt Sebastian Thrun, een Stanford-professor robotica, een vice-president bij Google en medeoprichter en CEO van Udacity . Onze populaire cursussen veranderen echt veel op basis van onze gegevens.
Volgens de meeste MOOC-aanbieders en cijfers van academici die les hebben gegeven met behulp van de cursussen, is een groot deel van het prestatieonderzoek ingegeven door de wens om de voltooiingspercentages van cursussen te verhogen, die rond de 10 procent schommelen. Een Udacity-onderzoeksproject suggereerde onlangs dat technische uitdagingen de oorzaak kunnen zijn van een aanzienlijk deel van de uitval. In het experiment werden enkele Udacity-gebruikers uitgenodigd om te sms'en met een geautomatiseerd helpsysteem dat daadwerkelijk gebruikmaakte van levende menselijke operators, en veel gebruikers noemden problemen met computervaardigheden.
De manier waarop mensen vastlopen is heel anders dan we verwachten, zegt Thrun. Sommige studenten kunnen simpelweg geen toetsenbord of website bedienen. Het laat zien dat de standaard one-size-fits-all MOOC niet volstaat om het retentieprobleem aan te pakken. Udacity werkt nu aan analysetechnieken die studenten kunnen sorteren op hun gedrag en gerichte hulp kunnen bieden of cursussen kunnen aanpassen om ze beter van dienst te kunnen zijn.
Het op maat maken van MOOC's is een idee met verdienste, zegt Chris Piech , een Stanford-promovendus die onderzoek doet naar online leren. In een recent onderzoek onderzochten Piech en twee collega's drie van Stanfords computerwetenschappelijke MOOC's en ontdekten dat drop-outs in drie verschillende groepen vielen: auditors, die niet van plan waren de cursus te voltooien, maar die het als een hulpmiddel gebruikten, zoals een boek; studenten die aan de cursus hebben deelgenomen, maar gaandeweg achterop raken; en degenen die tijdens de cursus sporadisch proefden.
Velen in de laatste twee groepen zouden waarschijnlijk een cursus voltooien als ze de juiste hulp krijgen, zegt Piech, en de gegevens die in het onderzoek zijn verzameld, suggereren dat het aanmoedigen van studenten om met elkaar te communiceren via forums of andere sociale functies dit zou doen.
Piech verwacht een stortvloed aan gepubliceerd en intern onderzoek van MOOC-aanbieders die significante vooruitgang in online leereffectiviteit rapporteren. Naarmate de MOOC-platforms robuuster worden en hun architectuur wordt uitgewerkt, zal onderzoek meer prioriteit krijgen en nuttiger worden, zegt hij. Zij leveren de grote aantallen om de moeilijke vragen over onderwijs te beantwoorden.
Sommige analyses die plaatsvinden bij MOOC-bedrijven lijken meer bescheiden vragen te beantwoorden. A/B-testen, een methode die veel wordt gebruikt bij internetbedrijven, wordt gebruikt om kleine ontwerpaanpassingen uit te proberen die studenten ertoe kunnen aanzetten het beter te doen. A/B-tests tonen verschillende versies van een service aan verschillende segmenten van het publiek van een site om te zien hoe ze reageren.
Door middel van A/B-testen, zegt Ng, ontdekte Coursera onlangs dat de gewoonte om mensen te e-mailen om hen te herinneren aan aanstaande cursusdeadlines, ervoor zorgde dat studenten minder geneigd waren om door te gaan met de cursussen. Maar het verzenden van e-mails met een samenvatting van de recente activiteit van studenten op de site verhoogde de betrokkenheid met enkele procentpunten. In een A/B-test van Udacity werd een ingekleurde versie van een les vergeleken met een zwart-witversie. De testresultaten waren veel beter voor de zwart-witversie, zegt Thrun. Dat verbaasde me.
Het is onduidelijk of de waslijsten van verfijningen die het resultaat zijn van A/B-testen zullen leiden tot een grootse theorie van leren en onderwijzen die de traditie uitdaagt. Ng zegt dat hij niet denkt dat een grootse theorie nodig is om MOOC's te laten slagen. Ik las Piaget en Montessori, en ze lijken allebei boeiend, maar opvoeders hebben over het algemeen geen manier om te kiezen wat echt werkt, zegt hij. Tegenwoordig is onderwijs een anekdotische wetenschap, maar ik denk dat we van onderwijs een datagestuurde wetenschap kunnen maken, waarbij je doet waarvan je weet dat het werkt.