Sinds OpenAI's ChatGPT in november 2022 publiekelijk beschikbaar werd, heeft het hoger onderwijs zich gefocust op de impact en toepassingen ervan – docenten willen begrijpen hoe dit hun werk en de studentenervaring zal vormgeven.

In veel gesprekken ontbreekt echter een discussie over hoe wetenschappelijke benaderingen kunnen worden gebruikt om ChatGPT en andere generatieve AI-tools te bestuderen in de context van hoger onderwijs. Nu de technologie zelf snel evolueert, is het opzetten van een raamwerk voor het onderzoeken van de implicaties ervan van cruciaal belang; we moeten weten welke vragen we moeten stellen, en moeten blijven stellen, ook al veranderen de antwoorden voortdurend.

Bij het Science of Learning Research Initiative (SOLER) van Columbia University is ons werk gericht op het onderzoeken van de academische ervaring van onze studenten en docenten door een wetenschappelijke lens. Om dit te doen, wordt gebruik gemaakt van onderzoek dat geworteld is in de Beurs voor lesgeven en leren (SoTL) – een systematisch onderzoek naar het leren van studenten om de onderwijspraktijken te verbeteren – en het analyseren van inzichten die zijn ontleend aan academische en institutionele gegevens. Het doel? Om de onderwijs- en leerervaring te bevorderen.

Ons team is begonnen met onderzoek naar de manier waarop studenten generatieve AI-tools gebruiken en we hebben geleerd dat we een systemische aanpak nodig hebben om de impact van deze tools in de loop van de tijd te onderzoeken, zodat we beter kunnen begrijpen hoe we ze kunnen inzetten. Hier zijn drie methoden die ons team heeft gebruikt.

Observationeel onderzoek

Bij SOLER hebben we observationeel onderzoek uitgevoerd om een ​​beter beeld te krijgen van de bestaande gewoonten, het begrip en de houding die onze studenten en docenten hebben ten aanzien van generatieve AI-tools. Een groot deel van het discours over generatieve AI in het hoger onderwijs heeft zich hierop geconcentreerd kwesties van wetenschappelijke integriteit. Om deze gesprekken te informeren is observationeel onderzoek – zonder tussenkomst – de noodzakelijke basis. Onze onderzoekers willen nagaan wat studenten en docenten weten over de technologie, hoe vaak ze deze gebruiken en voor welke doeleinden, en hoe zij het nut of de geschiktheid ervan in verschillende academische contexten zien.

Enkele van onze belangrijkste observatiemethoden zijn onder meer anonieme enquêtes en focusgroepen, die ‘veilige ruimtes’ bieden waar studenten openhartig kunnen zijn over hun gewoonten. We hebben ontdekt dat het verzamelen van deze informatie van cruciaal belang is voor een goede ondersteuning van docenten, die een grote behoefte hebben om het gedrag en de houding van hun studenten te begrijpen. Onze docenten hebben vragen over retentie en academisch succes; ze willen begrijpen hoe het gebruik van deze technologieën zich verhoudt tot de resultaten van studenten. Onze inspanningen om gegevens te analyseren hebben ons geholpen een licht te werpen op deze kwesties.

Het komende academiejaar zal SOLER samenwerken met de faculteit van Columbia's Graduate School of Architecture, Planning and Preservation en het Office of Academic Integrity om de houding van studenten over het gebruik van ChatGPT te onderzoeken. Het onderzoek zal dienen als startpunt voor een onderzoek dat uiteindelijk de impact van de tool op het leren van studenten in een cursus vastgoedfinanciering zal testen, wat ons bij onze volgende onderzoeksaanpak brengt: echte experimenten.

Echte experimenten

Echte experimenten zijn een kritische onderzoeksmethodologie omdat de steekproefgroepen willekeurig moeten worden toegewezen tussen controle- of experimentele groepen, en alle variabelen behalve degene die wordt bestudeerd, worden gecontroleerd om de causaliteit zo goed mogelijk te bepalen. We ontwerpen echte experimenten die prescriptieve vragen onderzoeken over de manieren waarop de technologie moet worden ingezet als instructiemiddel – dit is een sleutelelement voor het bevorderen van lesgeven en leren in het hoger onderwijs. Als het gaat om het onderzoeken van generatieve AI-tools via een SoTL Research-framework, combineren essentiële vragen elementen die disciplinespecifiek zijn met meer algemene overwegingen van de studentenervaring.

Wij zijn van mening dat echte experimenten met ChatGPT ontworpen moeten worden om twee belangrijke gebieden aan te pakken:

1. Experimenten moeten worden opgenomen in opdrachten, vooral in de context van het schrijven van papers en computerprogrammering, en moeten vragen onderzoeken over de motivatie van studenten, beoordeling, revisieprocessen en academische integriteit.
2. Experimenten moeten onderzoeken hoe ‘AI-docenten’ gepersonaliseerde feedback geven en de impact op leer- en houdingsgerelateerde resultaten voor studenten onderzoeken, en hoe deze resultaten zich verhouden tot de resultaten die met meer traditionele middelen worden bereikt.

Hybride onderzoek

Een derde kernbenadering is het implementeren van hybride onderzoek dat onderzoekt hoe studenten ervoor kiezen de technologie te gebruiken wanneer ze expliciete toegang krijgen maar beperkte instructies krijgen. Deze methode combineert elementen van de bovenstaande benaderingen en vult een conceptuele leemte door de volgende vraag te beantwoorden: wanneer ze toegang krijgen tot de technologie maar beperkte begeleiding, hoe kiezen leerlingen er dan voor om deze te gebruiken?

Observationeel onderzoek houdt eenvoudigweg in dat leerlingen worden aangemoedigd om de technologie in een bepaalde klas te gebruiken en dat leerlingen vervolgens worden gevraagd verslag uit te brengen over hun gebruik. Een echt experiment zou kunnen bestaan ​​uit het vaststellen van twee voorwaarden in één curriculaire context, zoals twee onderdelen van dezelfde cursus die dezelfde opdracht krijgen. In één voorwaarde krijgen studenten beperkt onderwijs; in het andere geval krijgen studenten specifieke begeleiding over hoe de technologie gebruikt moet worden in de context van de opdracht. Met behulp van een gecombineerde techniek met deze structuur zou een onderzoeker kunnen onderzoeken of de twee groepen verschillende gedragspatronen, leerresultaten of attitudes vertonen.

In deze zin ontwikkelt SOLER momenteel in samenwerking met de faculteit van de Columbia Business School een project dat zal onderzoeken hoe groepen studenten consensus bereiken over het gebruik van AI-beeldgeneratoren. Ons doel is om te begrijpen hoe de gebruikspatronen de interpersoonlijke dynamiek van de groepsleden bepalen.

Nu het hoger onderwijs zich door dit snel veranderende technologische landschap beweegt, is aanpassing onze enige optie. We moeten systematische en rigoureuze inspanningen leveren om nieuwe technologieën te begrijpen en te benutten – en we moeten ethische en morele vragen serieus overwegen, vooral vragen die betrekking hebben op diversiteit en inclusiviteit, zoals wie profiteert van deze instrumenten, en waarom?

Deze complexe kwesties kunnen op zinvolle wijze worden aangepakt door een wetenschappelijke benadering te volgen, robuuste onderzoekskaders te gebruiken en met institutionele steun voor deze inspanningen. Als we onderzoeken hoe studenten en docenten opkomende technologieën ervaren door een wetenschappelijke lens, kunnen we meer bereiken dan alleen maar bijblijven: we kunnen een pad uitstippelen naar een betere en rechtvaardigere toekomst.

• Door SEO aangedreven content en PR-distributie. Word vandaag nog versterkt.
• PlatoData.Network Verticale generatieve AI. Versterk jezelf. Toegang hier.
• PlatoAiStream. Web3-intelligentie. Kennis versterkt. Toegang hier.
• PlatoESG. carbon, CleanTech, Energie, Milieu, Zonne, Afvalbeheer. Toegang hier.
• Plato Gezondheid. Intelligentie op het gebied van biotech en klinische proeven. Toegang hier.
• Bron: https://www.edsurge.com/news/2024-01-05-to-understand-chatgpt-s-impact-on-higher-education-think-like-a-scientist