Kunstig intelligens som virkemiddel i analysearbeid
En ny rapport fra NOKUT utforsker hvordan kunstig intelligens (KI) kan brukes som støtte i analysearbeid knyttet til ekstern kvalitetssikring av høyere utdanning. Rapporten bygger på erfaringer fra NOKUTs tematiske analyser av den tredje runden med periodisk oppfølging.
Rapporten inngår som delrapport i NOKUTs samlede tematiske analyser og har et metodisk perspektiv. Formålet er ikke å erstatte faglige vurderinger, men å undersøke hvordan store språkmodeller kan bidra i arbeid med store mengder tekstbasert datamateriale.
– Kunstig intelligens kan være et nyttig støtteverktøy i analysearbeid, særlig når vi jobber med store mengder tekst. Samtidig viser erfaringene våre, ikke overraskende, at KI ikke kan erstatte faglige vurderinger og skjønn i analysearbeid, sier Philipp Emanuel Friedrich, seniorrådgiver i NOKUT.
Datagrunnlaget for analysen er 48 tilsynsrapporter fra perioden 2017–2024. Rapporten sammenligner erfaringene fra KI-assistert analyse med tradisjonell, manuell analyse.
Styrker og svakheter ved KI i analysearbeid
Analysen viser at språkmodeller har særlig styrke når det gjelder å håndtere store datamengder, strukturere informasjon og identifisere overordnede mønstre. Dette kan gjøre det lettere å få oversikt og støtte arbeidet med tematiske analyser.
Samtidig viser rapporten tydelig at manuell analyse fortsatt er avgjørende for å forstå kontekst, tolke nyanser og gjøre skjønnsmessige vurderinger. Menneskelig kvalitetssikring er derfor nødvendig i alle ledd av analysearbeidet.
– Det er altså kombinasjonen av KI-støttet analyse og manuell, faglig vurdering som gir de beste resultatene. KI kan bidra til struktur og oversikt, men det er mennesker som må tolke, vurdere og kvalitetssikre funnene, sier Friedrich.
Rapporten peker også på viktige forutsetninger for god bruk av KI i analysearbeid, blant annet behovet for godt strukturert datagrunnlag, tydelige instrukser og tilstrekkelig faglig kompetanse og KI-kompetanse hos dem som bruker verktøyet.