DDMV2 – Datadriven meritvärdering vid antagning till masterprogram
KTH hanterar 16,000 sökande till sina mastersprogram årligen. Detta projekt är en fortsättning från tidigare projekt och innebär att säkerställa att meritvärderingsprocessen är transparent och rättssäker samt att ytterligare minska arbetstiden genom att tillhandahålla systemstöd.
Projektkontext
KTH har ca 16.000 sökande till sina mastersprogram årligen. I antagningsarbetet ska samtliga sökandes behörighet bedömas. När antalet behöriga sökande överstiger antalet tillgängliga platser, vilket oftast är fallet, tillkommer dessutom meritvärdering. Vid några av KTH:s skolor ges administrativt stöd till programansvarig (PA) i detta arbete, men på olika sätt och i olika omfattning. Vid några skolor ges inget administrativt stöd alls. Arbetstiden – oavsett utförare - vid bedömning och meritvärdering är orimligt hög. Proceduren kräver att ett antal dokument per sökande manuellt söks fram, öppnas och bedöms i NyA-systemet. Eftersom ungefär endast en tiondel av de sökande påbörjar sina studier vid KTH är det av yttersta vikt att minska arbetstiden per sökande utan att varken tappa i kvalitet på de studenter vi antar eller minska rättssäkerheten.
Det tidigare projektet Datadriven meritvärdering – DDMV1 (2322-SCI) inom Framtidens utbildning har förkortat arbetstiden väsentligt genom att öka graden av digitalisering. Viss data hämtas ut från NyA, sökande studenter fyller i ett webbformulär (det s.k. Summary sheet) och ett beslutsstöd till PA (den s.k. PA-vyn) har skapats via en underliggande meritvärderingsmodell. Lösningen användes skarpt, utvärderades och dokumenterades under antagningsarbetet 2024 (februari-april) av 27 program vid KTH. Lösningen medger en hög grad av gemensamhet och transparens vad gäller bedömningsgrunder, vilket ökar rättssäkerheten, men tillåter även programspecifik anpassning.
Med anledning av det yttrande som kom från Universitetskanslersämbetet (UKÄ) 2021 avseende KTH:s användning av rankinglistor i meritvärderingsarbetet, initierades VS-projektet Meritvärdering master. Ett antal workshops hölls under hösten/vintern 2022-2023 kompletterat med en SWOT-enkät. Utifrån diskussionerna i workshoparna har det fastslagits att ett utökat och likvärdigt administrativt stöd är önskvärt. Detta avlastar fakulteten och säkrar transparens och likvärdighet i bedömningsarbetet. Det krävs att det finns ett anpassat verksamhetsstöd krävs, vilket innebär att det erforderliga stödet behöver analyseras, resurs-sättas och utföras på alla nivåer.
De två ansatserna slogs ihop redan under DDMV1 och detta projekt utgör en fortsättning av arbetet.
Syfte/Effekt (outcome)
Projektets syfte är att öka rättssäkerheten och effektiviteten i meritvärderingsprocessen genom tydlighet och ökad transparens. Effektmålen är:
- Ytterligare minskning av arbetet för både administration och PA i antagningsarbetet 2025 (februari-april), genom att öka automatiseringen jämfört med DDMV1. Följs upp via tidsjämförelser.
- En förbättrad meritvärderingsmodell vad gäller träffsäkerhet och validering. Följs upp via statistisk analys av modellen.
Projektresultat (output)
- Programspecifikt webbformulär för sökande studenter (s.k. ”Summary sheet”) vidareutvecklat, testat och publicerat inför antagningen 2025 för alla deltagande 28 program på SCI, ITM, EECS, CBH och ABE.
- Utvärdering av sökande studenter av webbformuläret (se Resultat nedan).
- Programspecifikt beslutsstöd till programansvariga (PA): vidareutvecklat excelprogram (”PA-vyn”) för att hantera data från webbformuläret.
- En vidareutvecklad statistisk meritvärderingsmodell (”MVM”) baserad på hur tidigare studenter har presterat på KTH och på vad dessa studenter hade för bakgrund (se Resultat nedan).
- Ytterligare data om internationella universitet till MVM (”Universitetslistan”). Process förbättrad och systemerad för alla skolor för när ett universitet inte finns i listan.
- Importinterface till NyA för överföring av beslut per program inför antagningsarbetet 2024 (ej längre manuell inmatning per student).
- Utbildning till VS-personal
- Skarp användning inom 29 masterprogram av framtagna system och rutiner under antagningsarbetet 2025 med utvärdering och dokumentation (februari-maj).
Tidplan
Startdatum: 2024-06-01
Slutdatum: 2025-05-30
Projektdokumentation
Du som har KTH-ID kan läsa den senaste projektdokumentationen, som ligger i OneDrive, i inloggat läge.
Resultat
- Studentutvärdering av webbformuläret (bidrag till 6:e SoTL, Scholarship for Teaching and Learning maj 2025)
- Meritvärderingsmodellen (bidrag till 10:e USI, Utvecklingskonferensen för Sveriges Ingenjörsutbildningar nov. 2025): Resultat_2406-KTH_Meritvärderingsmodellen-USI10-2025-11.pdf