UTVÄRDERING AV FORSKNINGENS
UTVÄRDERING AV DEN KLINISKA FORSKNINGENS KVALITET VID DE LANDSTING SOM OMFATTAS AV ALF-AVTALET 35 mats på och erhållit Vetenskapsrådets jävspolicy. Alla panelmedlemmar har intygat att ingen jävsitu-ation föreligger.
Vid sammansättningen av panelen har jämn könsfördelning och geografisk spridning eftersträvats.
Tabell 7. Expertpanelen – ALF-panel 3
Namn Organisation Land
Stig Arild Slørdahl (ordförande) Helse Midt-Norge Norge
Jaap Bonjer VU University Medical Center Amsterdam Nederländerna Erik Fosse Oslo universitetssykehus, Universitetet i Oslo Norge Björn Gustavsson Norges teknisk naturvitenskapelige universitet Norge
Ian Hall Nottingham University Storbritannien
Nina Langeland Universitetet i Bergen Norge
Marite Rygg Norges teknisk-naturvitenskapelige universitet Norge Janna Saarela FIMM, Institute for Molecular Medicine Finland Finland
Lars Bo Svendsen Rigshopsitalet, Danmark
Marja Riita Taskinen Helsingfors universitet Finland
Inger Thune Universitetet i Oslo Norge
Rein de Vos Academisch Medisch Centrum Nederländerna
Kriterier
Utvärderingen av den kliniska forskningens förutsättningar utgår från fyra komponenter:
1. Forskningsinfrastrukturer, avser tillgängligheten till
alf
-regionens forskningsinfrastrukturer, strategier för finansiering, underhåll och uppgradering, teknisk personal för underhåll och stöd vid användning, prioritering av infrastrukturer etc.2. Tid till forskning, avser hur
alf
-regionerna säkerställer att det ges tillräcklig tid till forskning i klinikens vardag, hur man på bästa sätt kombinerar klinisk anställning och klinisk forskning etc.3. Nästa generations forskare (utbildning), handlar om hur
alf
-regionen arbetar för att göra det attraktivt att bli klinisk forskare ialf
-regionen, och hur tvärdisciplinära och tvärvetenskapliga forskningsområden stimuleras, etc.4. Karriärmodeller för klinisk forskning, avser hur
alf
-regioner utvecklat karriärvägar för kliniska forskare som möjliggör klinisk forskning och kliniskt arbete parallellt, samt hur klinisk forskning premieras i karriären, etc.Komponenterna bedöms avseende hur de är implementerade i de sju
alf
-regionerna när det gäller att skapa förutsättningar för klinisk forskning. För att bedöma hur dessa komponenter har imple-menterats och utvecklats har en bedömningsmatris tagits fram (länk till bedömningsmatris). Det som bedöms är hur varjealf
-region har utvecklat respektive komponent avseende organisationen i verksamheterna och med avseende på strukturer, processer och resultat.Bedömningsmatrisen har också legat till grund för den datainsamling som gjorts, dels med en själv-värdering till ledningarna för de sju
alf
-regionerna, dels med en enkät som skickats till forsknings-ledare i respektivealf
-region.Bedömningsprocess
Utvärderingen har genomförts i tre steg:
1. förutvärdering av
alf
-regionerna baserat på regionernas självvärderingar och på enkätsvar från en enkät riktad till forskningsgruppledare ialf
regionerna (länk till instruktion)2. lokala platsbesök och utfrågning om verksamheten i de sju
alf
-regionerna (länk till schema för platsbesök)3. samlade diskussioner och bedömningar där panelen slutligen placerat
alf
-regionerna i någon av de tre kategorierna undermålig kvalitet, god–hög kvalitet eller mycket hög kvalitet.Utvärderingen har gjorts med hjälp av följande underlag:
• självvärdering från respektive
alf
-region• resultaten av enkäten till forskningsgruppsledarna
• platsbesök inklusive hearings.
Som bakgrund till uppdraget informerades dessutom panelen av Vetenskapsrådet om
alf
-finansiering-ens omfattning och omalf
-regionernas ungefärliga populationsstorlek och geografiska omfattning.Självvärdering
En mall för självvärdering skickades tillsammans med instruktioner ut till
alf
-regionerna den 6 sep-tember 2017 (länk till självvärdering). Sista dag för inlämning av självvärderingarna var den 18 oktober 2017. Vid självvärderingen ombads ledningsorganen för respektivealf
-region att redovisa hur de ar-betat med att implementera och utveckla de fyra olika komponenterna som ingår i bedömningen med avseende på strukturer, processer och resultat.Enkät till forskningsgruppsledare
En enkät skickades ut till forskningsgruppledare, som identifierats av
alf
-regionerna själva, den 6 september 2017 (länk till enkät). Sista dag för inlämning av svaren var den 27 september 2017. Enkäten innehåller frågor om forskningsledarens bakgrund som forskare, om personens medicinska professi-on, om mobilitet, om tid till forskning samt ett antal bedömningsfrågor som utgår ifrån den bedöm-ningsmatris som också använts för frågor i mallen för självvärderingen. I nedanstående tabell anges svarsfrekvensen för enkäten i respektive region.Tabell 8. Svarsfrekvens på enkäten till forskningsgruppledare i respektive ALF-region
ALF-region Utsända enkäter Respondenter Svarsfrekvens
Stockholm 775 482 62%
Västra Götaland 265 218 82%
Skåne 681 330 48%
Uppsala 185 129 70%
Västerbotten 296 188 64%
Östergötland 237 176 74%
Örebro 148 117 79%
Platsbesök
Då det är organisatoriska komponenter som ska bedömas och för att möjliggöra för panelen att få en lokal bild av respektive
alf
-region samt att träffa så många företrädare för regionerna som möjligt genomfördes platsbesök i varje region. Panelen delades upp i tre grupper som träffade de olikaalf
-re-gionerna under perioden 15–17 januari 2018, enligt tabell 9 (länk till schema för platsbesök).
UTVÄRDERING AV DEN KLINISKA FORSKNINGENS KVALITET VID DE LANDSTING SOM OMFATTAS AV ALF-AVTALET 37 Tabell 9. Panelens gruppindelning för platsbesöken
Grupp1 Grupp 2 Grupp 3
ALF-regioner
Östergötland och Stockholm Umeå, Uppsala och Örebro Skåne och Västra Götaland
Stig Slørdal Nina Langeland Lars Boo Svendsen
Marite Rygg Erik Fosse Inger Thune
Jaap Bonjer Ian Hall Rein de Voos
Marja-Riitta Taskinen Janna Saarela Björn Gustafsson
Bedömning
För att genomföra sin bedömning använde panelen inledningsvis en fyrgradig bedömningsskala för varje komponent och aspekt. Syftet med att använda en fyrgradigskala som ett första steg var att sä-kerställa att bedömningen av forskningens förutsättningar i de sju olika
alf
-regionerna baseras på samma grunder och att det framgår vad det är som utgör god kvalitet. Skalan som panelen inlednings-vis använde har följande gradering:1. nybörjare (beginning)
2. under utveckling (developing) 3. etablerad (accomplished) 4. exemplarisk (exemplary).
Bedömningen genomfördes enligt följande upplägg och enligt de tre stegen som redovisats ovan.
Steg 1
Innan panelen träffades i Stockholm genomfördes en förutvärdering av varje
alf
-region baserad på självvärderingarna och svaren på enkäten till forskningsgruppledarna. Panelledamöterna gjor-de individuella bedömningar, genom att använda gjor-den fyrgradiga skalan ovan, av hur väl respektivealf
-region har implementerat de strukturer, processer och resultat som de redovisat för varje kom-ponent. Panelledamöterna instruerades att använda skalan så att varje grad motsvarar samma bredd och djup genom alla bedömningar och att ange betyg, motivering och kompletterande frågor för varjealf
-region.När panelen träffades i Stockholm inför platsbesöken kalibrerades bedömningarna för att säker-ställa att bedömningsskalan använts på samma sätt och med samma betydelse av samtliga panelleda-möter. De kompletterande frågorna från ledamöterna sammanställdes och presenterades för panelen inför platsbesöken.
Steg 2
I nästa steg genomfördes platsbesök, då panelen fick möjlighet att ställa kompletterande frågor till ledningen för
alf
regionen, till verksamhetsansvariga och till forskare och doktorander inom klinisk forskning. Utfrågningarna utgick från de fyra komponenterna i avsikt att komplettera och förtydliga det underlag som lämnats i form av självvärderingarna. I samband med platsbesöken och utfrågning-arna formulerades en sammanfattande bedömning för respektive komponent, samt ett preliminärt omdöme för helaalf
-regionen avseende helheten för forskningens förutsättningar. När panelens tre grupper åter träffades, efter att platsbesöken var genomförda, diskuterades resultaten för att kalibrera och gemensamt enas om en sammanvägd bedömning av allaalf
regioner.Steg 3
I det sista steget omvandlades resultatet som panelen arbetat fram, enligt den fyrgradiga bedömnings-skalan, till de tre kategorier som
alf
-regionerna ska grupperas i (undermålig kvalitet, hög-god kva-litet eller mycket hög kvakva-litet). Då enades panelen om ett sammanfattande omdöme som motiverarkategoriseringen. Panelen sammanfattade även sina generella reflektioner över förutsättningarna för klinisk forskning i Sverige i de sju
alf
regionerna.Avsikten med ovanstående process har varit att på bästa sätt skapa en tydlig och transparent utvärde-ring av den kliniska forskningens förutsättningar i de sju
alf
-regionerna, så att varje region bedöms utifrån sina förutsättningar på en likvärdig skala.Panelmöten
Expertpanelen träffades i Stockholm i anslutning till platsbesöken den 14–19 januari 2018. Efter plats-besöken genomfördes diskussioner för att kalibrera och gemensamt enas om en sammanvägd bedöm-ning av alla
alf
-regioner. Samtliga panelmedlemmar har tagit del av alla underlag för bedömning av de sjualf
-regionerna och har aktivt deltagit vid hearings med företrädare föralf
-regionerna i de tre grupperna som redovisats ovan.Medlemmarna i panelen är gemensamt ansvariga för de slutliga bedömningarna och för panelens rapport. I rapporten (se del 2) framgår panelens motiveringar till kategoriseringarna. Rapporten be-tonar också goda exempel på speciella aspekter av någon
alf
-region, som panelen vill framhäva, vid sidan av den övergripande bedömningen. Dessutom finns identifierade utvecklingsområden samt re-kommendationer till förbättringar.UTVÄRDERING AV DEN KLINISKA FORSKNINGENS KVALITET VID DE LANDSTING SOM OMFATTAS AV ALF-AVTALET 39