DDMV1 – Datadriven meritvärdering vid antagning till masterprogram
Projektet innebär att öka kvalitén i masterantagningsprocessen samtidigt som arbetsinsatsen för både PA och studieadministration minskar, genom att i hög grad automatisera datahanteringen och dessutom ta fram en gemensam och transparent meritvärderingsmodell.
Projektkontext
KTH har många internationella sökande till sina mastersprogram. Utvärderingen (av särskild behörighet och meriter) av dessa sökande tar idag avsevärd tid i anspråk både för KTH:s administration och för programansvariga lärare (PA). Proceduren kräver att ett antal dokument manuellt söks fram, öppnas och bedöms i NyA- systemet (Universitet och Högskolerådets antagningssystem). Processens effektivitet skulle kunna förbättras via automatiserad datahantering. I tillägg finns idag inte någon tydlig, gemensam och transparent metod för hur studenternas meriter ska bedömas för att utgöra en god indikator på deras möjlighet att klara av studierna på KTH. Även kvalitén i antagningsprocessen har förbättringspotential.
Inför arbetet med masterantagningen på SCI-skolan 2023 genomfördes därför ett pilotprojekt under hösten 2022 med det övergripande målet att öka kvalitén i antagningsprocessen samtidigt som arbetsinsatsen för både PA och studieadministration skulle minska. Pilotprojektet lyckades med att uppnå båda dessa mål, samtidigt som ett antal nya idéer för att kunna fortsätta i riktning mot det övergripande målet identifierades. Det finns alltså potential att ytterligare öka både effektiviteten och kvaliteten i processen.
Detta projekt innefattar att göra det arbete som SCI-skolan själv kan genomföra för att komma vidare framåt. Samarbete med andra skolor och med verksamhetsstödet (VS) har potential att leda till ytterligare förbättringar.
Syfte/Effekt (outcome)
Det övergripande syftet med projektet är att skapa bättre kvalitet i bedömningen inför mastersantagningen 2024 på SCI-skolan samtidigt som tidsåtgången för arbetet minskas. Effektmålen är:
- Mindre arbete för både administration och PA, genom att automatisera alla delar som kan automatiseras (automatiserad datahantering för att snabbt få fram ett lätthanterligt beslutsstöd samt en preliminär rankning av studenternas meriter). Följs upp via tidsjämförelser.
- Bättre bedömning inför den internationella antagningen 2024, genom att skapa en mera träffsäker och validerad meritvärderingsmodell (användning av data från ett större antal tidigare studenter på KTH än vad som var fallet i pilotstudien). Följs upp via statistisk analys av modellen.
Projektresultat (output)
- Genomförda presentationer till andra skolor, i syfte att värva flera masterprogram och därmed öka möjligheterna för en bredare implementation på KTH.
- Programspecifikt webbformulär för sökande studenter (s.k. ”Summary sheet”) framtaget, testat och publicerat (via länk från antagning.se / universityadmissions.se) inför antagningen 2024 för alla deltagande 27 program på SCI, CBH, EECS och ITM.
- Beslutsstöd till PA (”PA-vyn”): Excelprogram för att hantera data från webbformuläret framtaget och testat inför antagningsarbetet 2024 för alla deltagande 27 programansvariga (PA).
- En statistisk meritvärderingsmodell (”MVM”) baserad på hur tidigare studenter har presterat på KTH och på vad dessa studenter hade för bakgrund. Syftet med modellen är att statistiskt förutsäga (med en beräknad osäkerhet) hur en sökande förväntas prestera vid sina framtida studier på KTH (se Resultat nedan).
- Anskaffade data om internationella universitet (”Universitetslistan”) med rutin för hantering av saknade universitet.
- En första processbeskrivning framtagen (VS) samt utbildning i process och excelfiler till deltagande programs handläggare inför antagningsarbetet 2024.
- Skarp användning under antagningsarbetet 2024 av framtagna excelprogram och rutiner inom 27 masterprogram med viss efterföljande utvärdering och dokumentation (februari-april).
Tidplan
Startdatum: 2023-08-01
Slutdatum: 2024-04-30
Projektdokumentation
Du som har KTH-ID kan läsa den senaste projektdokumentationen, som ligger i OneDrive, i inloggat läge:
-
Projektdirektiv: Projektdirektiv_FrU23_2322-SCI_Masterantagning-DDMV1.pdf
Resultat
- Meritvärderingsmodell (bidrag till 9:e Utvecklingskonferensen för Sveriges Ingenjörsutbildningar nov. 2023)
I oktober 2023 började detta projekt Datadriven masterantagning (DDMV1) att samarbeta med det närliggande VS-projektet Meritvärdering master. De två ansatserna slogs sedermera ihop med gemensam styrgrupp och arbetet fortsätter i projektet DDMV2 (KTH-2406) med programansvariga (PA) från SCI, ABE, CBH, EECS och ITM, IT-avdelningen samt centralt och skollokalt VS på berörda skolor.