U multirank - et internationalt pilotprojekt om ranking - Siksne, Kirsten

1. U-Multirank - et internationalt pilotprojekt om ranking
Siksne, Kirsten
Aalborg Universitet
Published in:
Uglen 1, page 24-25
Publication date:
June 6th, 2011

2. U-MULTIRANK - ET MULTI-
DIMENSIONALT RANKING- PROJEKT
Eksisterende rankings kritiseres jævnligt for
at basere sig på snævre parametre, for at
tilgodese bestemte institutioner/tagområder
og for at se bort fra regionale forskelle.
U-Multirank er et forsøg på at imødese disse
kritikpunkter. Initiativet støttes økonomisk af
EU-kommissionen og er fagligt forankret hos
en række europæiske forskningsenheder,
der er toneangivende inden for
forskningsevaluering.
Aalborg Universitet deltager sammen med
150 andre forskningsinstitutioner i projektets
pilotfase hvor sigtet er at afklare, hvorvidt
ambitionen om at udvikle en
multidimensional global ranking er realistisk.
AAU's deltagelse
Det har fra starten stået klart, at deltagelse i
projektet ville indebære omfattende
selvindrapportering af nøgletal på tværs af
organisationen. Som tværgående projekt,
der samtidig har båret præg af at være i en
indkøringsfase fra initiativtagernes side, har
processen til tider været vanskelig at
forankre i organisationen.
Deltagelsen er dog strategisk vigtig i forhold
til at udvikle AAU's organisation i
rankingsammenhæng, og vi har nu en solid
platform at arbejde videre med:
• Som Stakeholder præger AAU den retning,
projektet tager dermed U-Multiranks
endelige form.
• Dataindsaming på tværs af organisationen
har korlagt, hvilke nøgletal det for
indeværende er muligt at indsamle på AAU
og i samme ombæring, hvad det ikke er
muligt at indsamle oplysninger om.
• På sigt er det realistisk at forvente, at andre
rankings vil inddrage aspekter, som indgår i
U-Multirank (teaching& learning, knowledge
transfer activities & community outreach for
nævne nogle få). Qua den aktive deltagelse
er AAU på forkant med
udviklingstendenserne og kan reagere
proaktivt herpå.
Organisering
Projektledelsen er forankret i
Forskningssekretariatet. Dataindsamlingen
har primært involveret økonomiafdelingen,
Studieforvaltningen samt AAU Innovation.
Andre dele af administrationen har
herudover været involveret i skiftende
omfang.
Organisering, processtyring og den løbende
dialog med konsortiet bag U-Multirank har
for nuværende beskæftiget en AV-
medarbejder på fuld tid i tre måneder.
Projektets faser
1. Målformulering, indledende dialog med
konsortiet (sikring af validitet)
2. Dataindsamling, processtyring og
kvalitetssikring:
- To separate runder om AAU som helhed
- Indsamling af nøgletal på institutniveau
(tre institutter udvalgt af konsortiet bag U-
Multirank)
U-MULTIRANK - ET MULTI-
DIMENSIONALT RANKING- PROJEKT
Eksisterende rankings kritiseres jævnligt for
at basere sig på snævre parametre, for at
tilgodese bestemte institutioner/tagområder
og for at se bort fra regionale forskelle.
U-Multirank er et forsøg på at imødese disse
kritikpunkter. Initiativet støttes økonomisk af
EU-kommissionen og er fagligt forankret hos
en række europæiske forskningsenheder,
der er toneangivende inden for
forskningsevaluering.
Aalborg Universitet deltager sammen med
150 andre forskningsinstitutioner i projektets
pilotfase hvor sigtet er at afklare, hvorvidt
ambitionen om at udvikle en
multidimensional global ranking er realistisk.
AAU's deltagelse
Det har fra starten stået klart, at deltagelse i
projektet ville indebære omfattende
selvindrapportering af nøgletal på tværs af
organisationen. Som tværgående projekt,
der samtidig har båret præg af at være i en
indkøringsfase fra initiativtagernes side, har
processen til tider været vanskelig at
forankre i organisationen.
Deltagelsen er dog strategisk vigtig i forhold
til at udvikle AAU's organisation i
rankingsammenhæng, og vi har nu en solid
platform at arbejde videre med:
• Som Stakeholder præger AAU den retning,
projektet tager dermed U-Multiranks
endelige form.
• Dataindsaming på tværs af organisationen
har korlagt, hvilke nøgletal det for
indeværende er muligt at indsamle på AAU
og i samme ombæring, hvad det ikke er
muligt at indsamle oplysninger om.
• På sigt er det realistisk at forvente, at andre
rankings vil inddrage aspekter, som indgår i
U-Multirank (teaching& learning, knowledge
transfer activities & community outreach for
nævne nogle få). Qua den aktive deltagelse
er AAU på forkant med
udviklingstendenserne og kan reagere
proaktivt herpå.
Organisering
Projektledelsen er forankret i
Forskningssekretariatet. Dataindsamlingen
har primært involveret økonomiafdelingen,
Studieforvaltningen samt AAU Innovation.
Andre dele af administrationen har
herudover været involveret i skiftende
omfang.
Organisering, processtyring og den løbende
dialog med konsortiet bag U-Multirank har
for nuværende beskæftiget en AV-
medarbejder på fuld tid i tre måneder.
Projektets faser
1. Målformulering, indledende dialog med
konsortiet (sikring af validitet)
2. Dataindsamling, processtyring og
kvalitetssikring:
- To separate runder om AAU som helhed
- Indsamling af nøgletal på institutniveau
(tre institutter udvalgt af konsortiet bag U-
Multirank)
- Spørgeskemaundersøgelse blandt 1500
studerende
3. Validering af data, notatskrivning i forhold
til oplevede problematikker og barrierer
internt på AAU
4. Indrapportering af den indsamlede data
samt evaluering/feedback til konsortiet
5. Pilotfasen forventes afsluttet i sommeren
2011 med afholdelse af konference og
endelig rapport på baggrund af de
deltagende institutioners feedback.
AAU har især markeret sig stærkt i forhold til
at give konstruktiv feedback til konsortiet og i
forhold til at sikre kvalitet i den indsamlede
data.
Fakta
• Pilotprojekt med deltagelse af 150
institutioner fra 54 lande (status december
2010)
• Der måles på institutionelt og disciplinært
niveau
• I første omgang ingen ranking i traditionel
forstand (og ingen bred offentliggørelse),
men etablering af performance profiler, hvori
der tages højde for institutionelle
karakteristika (via klassifikationsvaærktøjet
U-Map)
• Omfattende dataindsamling med
indberetning af nøgletal på flere niveauer -
udpræget selvindrapportering
• Bibliografisk data fra både Web of Science
og Scopus
• Værdifuld proces i forhold til at præge
udformningen af U-multirank samt kortlægge
barrier i forbindelse med dataindsamling på
AAU.
Tidshorisont (pilotprojektet)
• Endelig deadline for dataindberetning (1.
februar 2011)
• Foreløbig rapport om forløbet (maj 2011)
• Data gøres tilgængelig for deltagende
institutioner (maj 2011)
• Afholdelse af konference (juni 2011)
• Endelig rapport om forløbet (juni 2011).
Indhold
• U-Multirank er baseret på
klassifikationssystemet U-Map, som
identificerer og tager højde for institutionelle
forskelle.
• Der måles på institutionelt og
disciplinorienteret niveau. I pilotfasen
disciplinerne "Business", "Mechanical" og
"Electrical Engineering".
• Pilotfasen offentliggøres ikke en
rankingliste, men data gøres tilgængelig for
deltagende institutioner til brug
benchmarking.
Processen
1. Indberetning af data til U-Map med
fokus på institutionel profil (data indsamles
på institutionen af administrationen).
2. Indberetning af data til U-Multirank med
fokus på institutionelle karakteristika og
performance som helhed (data indsamles på
institutionen administrationen)
3. Indberetning af data til U-Multirank med
fokus på de enkelte discipliner (indsamles på
institutionen af administrationen)
4. Spørgeskemaer med fokus på
institutionen som helhed og de enkelte
Fakta
• Pilotprojekt med deltagelse af 150
institutioner fra 54 lande (status december
2010)
• Der måles på institutionelt og disciplinært
niveau
• I første omgang ingen ranking i traditionel
forstand (og ingen bred offentliggørelse),
men etablering af performance profiler, hvori
der tages højde for institutionelle
karakteristika (via klassifikationsvaærktøjet
U-Map)
• Omfattende dataindsamling med
indberetning af nøgletal på flere niveauer -
udpræget selvindrapportering
• Bibliografisk data fra både Web of Science
og Scopus
• Værdifuld proces i forhold til at præge
udformningen af U-multirank samt kortlægge
barrier i forbindelse med dataindsamling på
AAU.
Tidshorisont (pilotprojektet)
• Endelig deadline for dataindberetning (1.
februar 2011)
• Foreløbig rapport om forløbet (maj 2011)
• Data gøres tilgængelig for deltagende
institutioner (maj 2011)
• Afholdelse af konference (juni 2011)
• Endelig rapport om forløbet (juni 2011).
Indhold
• U-Multirank er baseret på
klassifikationssystemet U-Map, som
identificerer og tager højde for institutionelle
forskelle.
• Der måles på institutionelt og
disciplinorienteret niveau. I pilotfasen
disciplinerne "Business", "Mechanical" og
"Electrical Engineering".
• Pilotfasen offentliggøres ikke en
rankingliste, men data gøres tilgængelig for
deltagende institutioner til brug
benchmarking.
Processen
1. Indberetning af data til U-Map med
fokus på institutionel profil (data indsamles
på institutionen af administrationen).
2. Indberetning af data til U-Multirank med
fokus på institutionelle karakteristika og
performance som helhed (data indsamles på
institutionen administrationen)
3. Indberetning af data til U-Multirank med
fokus på de enkelte discipliner (indsamles på
institutionen af administrationen)
4. Spørgeskemaer med fokus på
institutionen som helhed og de enkelte
discipliner (udfyldes af studerende på del
pågældende uddannelser)
5. Yderligere data indhentes fra de
bibliometriske databaser Scopus og WoS
(gøres af teamet bag U-Multirank).
U-Map - Activity profiles
• Undervisningsprofi
• De studerendes profil
• Involvering i forskning
• Involvering i videndeling
• Regional forankring
• International orientering.
U-Multirank - Performance profiles
International orientering
• antal udenlandske forskere
• antal udenlandske studerende
• antal engelsksprogede uddannelsestilbud
• antal udenlandske ph.d.er
• antal ind- og udgående studerende i
udveksling.
Regional forankring
• antal kandidater, der arbejder i regionen
• samarbejdsaftaler med regionale
virksomheder
• indtægter fra regionale kilder.
Involvering i videndeling
• størrelse på kommercialiseringsenhed
• samarbejdsaftaler med virksomheder
• antal patentansøgninger
• indtægter fra licenser og copyrights
• antal spin-offs
• omfang af CPD-kurser
• antal af forskningspublikationer i tilblivelse
med erhvervslivet.
Forskningen og dens gennemslagskraft
• udgifter til forskning
• indtægter til forskning kommende fra kilder
som fx forskningsråd og tilvarende
• antal peer reviewed publikationer og
produktioner
• omfanget af citationer
• antal forskningspubliceringer i interne
tidsskrifter
• antal forskningsartikler udelukkende med
nationalt ophav
• antal tildelte internationale forskningspriser.
Undervisningen og karrieremuligheder
• udgifter til undervisning
• gennemsnitlig gennemførelsestid
• antal studerende, der gennemfører studiet
• opgørelse over kandidaters jobsituation
• opgørelse af kandidaters lønningsniveau...
Vil du vide mere…
Kirsten Siksne er AAU’s projektleder på U-
Multirank. Hvis du vil vide mere om U-
Multirank kan hun kontaktes på
ksi@adm.aau.dk.
discipliner (udfyldes af studerende på del
pågældende uddannelser)
5. Yderligere data indhentes fra de
bibliometriske databaser Scopus og WoS
(gøres af teamet bag U-Multirank).
U-Map - Activity profiles
• Undervisningsprofi
• De studerendes profil
• Involvering i forskning
• Involvering i videndeling
• Regional forankring
• International orientering.
U-Multirank - Performance profiles
International orientering
• antal udenlandske forskere
• antal udenlandske studerende
• antal engelsksprogede uddannelsestilbud
• antal udenlandske ph.d.er
• antal ind- og udgående studerende i
udveksling.
Regional forankring
• antal kandidater, der arbejder i regionen
• samarbejdsaftaler med regionale
virksomheder
• indtægter fra regionale kilder.
Involvering i videndeling
• størrelse på kommercialiseringsenhed
• samarbejdsaftaler med virksomheder
• antal patentansøgninger
• indtægter fra licenser og copyrights
• antal spin-offs
• omfang af CPD-kurser
• antal af forskningspublikationer i tilblivelse
med erhvervslivet.
Forskningen og dens gennemslagskraft
• udgifter til forskning
• indtægter til forskning kommende fra kilder
som fx forskningsråd og tilvarende
• antal peer reviewed publikationer og
produktioner
• omfanget af citationer
• antal forskningspubliceringer i interne
tidsskrifter
• antal forskningsartikler udelukkende med
nationalt ophav
• antal tildelte internationale forskningspriser.
Undervisningen og karrieremuligheder
• udgifter til undervisning
• gennemsnitlig gennemførelsestid
• antal studerende, der gennemfører studiet
• opgørelse over kandidaters jobsituation
• opgørelse af kandidaters lønningsniveau...
Vil du vide mere…
Kirsten Siksne er AAU’s projektleder på U-
Multirank. Hvis du vil vide mere om U-
Multirank kan hun kontaktes på
ksi@adm.aau.dk.