Tutkimuksen laatu ja vaikuttavuus tutkijanarvioinnin uudistamisen keskiössä

Uudistuksen myötä tutkimuksen arvioinnin painopiste halutaan siirtää määrällisestä arvioinnista laadullisen arvioinnin suuntaan, samalla tunnustaen tutkimuksen ja tutkijanurien moninaisuus. (CoARA 2022.) Suomessa CoARA-sopimuksen ovat allekirjoittaneet kaikki yliopistot sekä 21 ammattikorkeakoulua. Allekirjoittaneiden tahojen joukossa ovat myös Suomen Akatemia ja Tieteellisten seurain valtuuskunta. (Tilanne 26.6.2024, CoARA 2024d.)

CoARA-sopimus edellyttää sitoutuneita tahoja osoittamaan suunnitelmansa sopimuksessa määriteltyjen kymmenen sitoumuksen täyttämiseksi. Toimintasuunnitelma tulee laatia vuoden kuluessa, ja sen täytäntöönpano tulee tapahtua viiden vuoden kuluessa sopimuksen allekirjoittamisesta. Toimintasuunnitelma on julkinen dokumentti, joka tulee julkaista EU:n rahoittamalla avoimen tiedon tallentamiseen tarkoitetulla Zenodo-alustalla. (CoARA 2024a.)

CoARA-sopimuksessa määritellään yhteensä kymmenen sitoumusta, jotka luovat pohjan arvioinnin uudistamiselle. Neljä näistä ovat ydinsitoumuksia, jotka muodostavat sopimuksen pääviestin. Ensimmäinen ydinsitoumus edellyttää tutkimuspanosten ja tutkijanuran moninaisuuden tunnustamista tutkimuksen tarpeiden ja luonteen mukaisesti. Tavoitteena on laajentaa tutkimuskäytäntöjen, -toiminnan ja urapolkujen arvostusta eri tutkimusalojen erityispiirteet huomioiden sekä edistää avoimuutta. Esimerkkeinä tutkimustoiminnan tehtävistä, joiden arvostusta halutaan lisätä, ovat muun muassa vertaisarviointi, tiedeviestintä, tohtorikoulutettavien ohjaus, ohjelmistosuunnittelu, tekniset roolit, yhteiskunnallinen vuorovaikutus ja opetus. Vastaavasti tutkimustuotoksiksi tulee tieteellisten julkaisujen ohella lukea muun muassa ohjelmistot, mallit, menetelmät, teoriat, algoritmit, näyttelyt ja strategiat. Tutkijoiden tulee siis voida profiloitua eri rooleihin ja nauttia niissä yhtäläistä arvostusta. (CoARA 2022.)

Toinen ydinsitoumus keskittyy laadulliseen arviointiin, jossa korostetaan vertaisarviointia ja määrällisten indikaattoreiden vastuullista käyttöä. Määrällisten indikaattoreiden käyttö voi olla perusteltua asiayhteydestä riippuen. Laadullinen arviointi on erityisen tärkeää henkilöstön rekrytointi- ja ylentämispäätöksissä, palkitsemisessa sekä rahoitettavan tutkimuksen valinnassa. Arviointiprosesseissa tulee lisäksi huomioida muun muassa avoimuus, puolueettomuus, luottamuksellisuus, sukupuolinäkökulma, tasa-arvo ja monimuotoisuus. (CoARA 2022.)

Kolmas ydinsitoumus edellyttää h-indeksin ja Journal Impact Factorin (JIF) kaltaisten lehti- ja julkaisupohjaisten mittareiden käytön lopettamista ainoina tutkimuksen laadun ja vaikuttavuuden arviointikriteereinä (CoARA 2022). Vaikka määrällistä tieteellisiin julkaisuihin perustuvaa arviointia tarvitaan yhä, se on oltava läpinäkyvämpää ja vastuullisempaa. Tutkimusjulkaisut tulevat säilyttämään tärkeän roolinsa tutkimustulosten viestimisessä tiedeyhteisölle. (Olsbo & Ylönen 2023.)

Neljänneksi tutkimuksen arvioinnissa tulisi välttää tutkimusorganisaatioiden ranking-listojen käyttöä, sillä kaupallisiin kriteereihin perustuvia kansainvälisiä ranking-listoja ei pidetä oikeudenmukaisina tai vastuullisina. Tämän vuoksi organisaatiotason luokituksia ei tulisi käyttää tutkimuksen ja tutkijoiden arvioinnissa, eikä ranking-sijoituksia tulisi hyödyntää organisaation markkinoinnissa. (CoARA 2022.)

CoARA-sopimuksessa on lisäksi kuusi tukisitoumusta, jotka kytkeytyvät ydinsitoumusten toteuttamiseen: Sopimuksen täytäntöönpano edellyttää resursseja muun muassa prosessien kehittämiseen ja henkilöstön kouluttamiseen. Organisaatioiden, tutkimuksen ja tutkijoiden arviointimenetelmiä tulee kehittää yhteistyössä eri tahojen, eri tieteenalojen ja uran eri vaiheissa olevien tutkijoiden kanssa, jotta laatua edistävien tutkimustoimien ja -käytäntöjen moninaisuus pystytään tunnistamaan paremmin. Tietoisuutta CoARA-kehittämistyön aiheuttamista muutoksista tutkimukseen ja tutkijanarviointiin tulee lisätä viestinnällä, ja sopimukseen sitoutuneilta organisaatioilta edellytetään yhteistyötä ja tiedonjakoa keskinäisen oppimisen mahdollistamiseksi. Sopimuksen täytäntöönpanossa edistymisestä tulee tiedottaa, ja CoARA:n tuomien muutoksien vaikutuksia tulee seurata ja arvioida. (CoARA 2022.)

CoARA-sopimuksen tarve juontuu akateemiseen tutkimusperinteeseen liittyvistä haasteista, joissa julkaisutoimintaa käytetään mittarina tutkimuksen laadulle ja vaikuttavuudelle. Tämän vuoksi CoARA-sopimuksen sisältö näyttäytyykin erilaisena tutkimus-, kehitys- ja innovaatiotoimintaa (TKI) harjoittaville ammattikorkeakouluille, joilla on Suomessa lakisääteinen, keskeinen rooli aluekehityksessä. CoARA-sopimus painottaa tutkimuksen yhteiskunnallista vaikuttavuutta, avoimuutta ja yhteistyötä, jotka ovat TKI-toiminnan kulmakiviä ammattikorkeakouluissa. TKI-toiminta keskittyy soveltavaan tutkimukseen, jossa keskeistä on tieteellisen tiedon edistäminen sekä tulosten hyväksyttävyys ja käytännön sovellettavuus. (Centria 2024.) CoARA-kehittämistyö tarjoaa täten oivan tilaisuuden korostaa soveltavan tutkimuksen profiilia tiedeyhteisöissä. Sopimus asettaa yhteiskunnallisen vaikuttavuuden tutkimuksen arvioinnin keskiöön, mikä on entistä merkityksellisempää myös tutkimusrahoittajien näkökulmasta. (Roininen, Krappe & Timonen 2023; Roman, Ylimaunu & Ueleben 2023.)

CoARA-sopimuksen täytäntöönpano haastaa ammattikorkeakouluja kehittämään laadullista tutkijanarviointia keskittyen erityisesti sopimuksen kahteen ensimmäiseen ydinsitoumukseen. Tässä kehittämistyössä keskeisiä teemoja ovat tutkijan urapolut ja laadullinen vertaisarviointi. (Roininen ym. 2023.) Tutkijan urapolut ovat ammattikorkeakouluissa suhteellisen tuore asia verrattuna yliopistojen vakiintuneisiin urapolkuihin (Timonen, Drake & Turkulainen 2023). Ammattikorkeakoulujen TKI-toiminta on voimakkaassa kasvussa (Maxenius 2023; Valtioneuvosto 2024), mikä tekee urapolkujen kehittämisestä lisäksi erityisen ajankohtaista. Urapolkujen selkeyttäminen lisää soveltavaan tutkimukseen keskittyvän tutkijanuran houkuttelevuutta ja täten ammattikorkeakoulujen vetovoimaa työnantajina. (Timonen ym. 2023.) Laadullinen vertaisarviointi on CoARA:n edellyttämä uusi arviointitapa, jossa ammattikorkeakouluverkostolla olisi mahdollisuus hyötyä toisistaan (Roininen ym. 2023).

Centrian CoARA-toimintasuunnitelmaa (Centria 2024a) on työstetty alkuvuodesta 2024 lähtien, ja valmis suunnitelma julkaistiin Zenodo-alustalla kesäkuussa. Toimintasuunnitelman laatiminen on edennyt samanaikaisesti Centrian (2024b) strategian päivittämisprosessin kanssa. CoARA-sopimuksen kaksi ensimmäistä ydinsitoumusta, jotka edellyttävät ammattikorkeakoulujen näkökulmasta eniten kehittämistyötä, onkin sovitettu tiiviisti yhteen uuden strategian kanssa.

Sopimuksen ensimmäinen ydinsitoumus, joka keskittyy tutkimuspanosten ja tutkijanuran moninaisuuden tunnustamiseen tutkimuksen tarpeiden ja luonteen mukaisesti, linkittyy Centrian strategisen tavoitteeseen osaamisen johtamisen kehittämisessä. Tämän strategisen tavoitteen keskiössä on asiantuntijoiden kasvun tukeminen ja mielekkään työn edistäminen. (Centria 2024a, 2024b.) Tarkoituksena on luoda osaamisen kehittämisen viitekehys, jonka avulla parannetaan järjestelmällisesti koko henkilöstön, ei pelkästään TKI-henkilöstön, osaamistasoa tarjoamalla mahdollisuuksia taitojen kehittämiseen kaikissa tehtävissä. Viitekehyksen käyttöönoton myötä Centrian henkilöstö tunnistaa paremmin erilaiset kehittymis- ja uramahdollisuudet. Osaamisen viitekehys tullaan ottamaan osaksi vuotuisia kehityskeskusteluja, ja sitä tullaan hyödyntämään tutkimusryhmien ja TKI-tiimien arvioinnissa.

CoARA-sopimuksen toiseen, laadulliseen arviointiin keskittyvään ydinsitoumukseen liittyen Centrian tavoitteena on kehittää vertaisarviointia yhdessä strategisten kumppaneidensa Seinäjoen ammattikorkeakoulun ja Satakunnan ammattikorkeakoulun kanssa (Centria 2024a). Centria (2024b) on uudessa strategiassaan asettanut tavoitteeksi etsiä korkeakouluyhteistyöstä uusia avauksia ja tehostaa sen avulla toimintaansa, mukaan lukien CoARA-sopimuksen puitteissa tapahtuva laadullisen arvioinnin kehittäminen.

Centria on CoARA:n Suomen kansallisen osaston jäsen. Osallistumme tiedon jakamiseen ja edistämme keskinäistä oppimista sekä kansallisessa CoARA-osastossa että ammattikorkeakoulujen verkostossa. CoARA-kehittämistyön tulokset tulevat näkymään viestinnässämme tulevina vuosina, ja sen edistymisestä tiedotetaan Centrian verkkosivuilla, Centraali-intranetissä ja sisäisissä tapahtumissa. Aloitamme myös tarkemman seurannan avoimesti jaettujen tietoaineistojen määrästä ja tarjoamme Centrian tietoja mahdollisuuksien mukaan CoARA-vaikutusten seurantaan ja arviointiin. Kaiken kaikkiaan CoARA-sopimusta pidetään Centriassa tervetulleena välineenä tutkimustyön ja TKI-toiminnan kehittämiseen.