Suomeen aukesi oma RR-keskus: Kaksivaiheinen vertaisarviointi edistää tutkimuksen laatua ja läpinäkyvyyttä
Rekisteröidyt tutkimusraportit ovat tieteellisiä tutkimuksia, jotka vertaisarvioidaan sekä ennen työn aloittamista että sen jälkeen. Maailmanlaajuisesti tällaisia RR-tutkimuksia julkaisee jo yli 300 tieteellistä lehteä, joiden joukossa mm. Nature. Suomessa tietoisuus julkaisumallista ja sen hyödyistä on vasta kasvamassa.
”On tärkeää, että julkaisuprosessin avoimuutta edistävät uusimmat arviointi- ja julkaisukäytännöt ovat myös suomeksi julkaisevien tutkijoiden ulottuvilla”, toteaa Julkaisufoorumin pääsihteeri Janne Pölönen Tieteellisten seurain valtuuskunnasta.
Kaksiosainen arviointi parantaa tutkimusprosessin läpinäkyvyyttä ja luotettavuutta. Sen lisäksi, että tämä vähentää riskejä tulosten vääristymiselle, tutkijat hyötyvät palautteesta heti työn alkuvaiheessa, jolloin virheitä ja puutteita on vielä mahdollista korjata.
Vuonna 2023 perustettu Suomen Rekisteröityjen tutkimusraporttien kansallinen vertaisarviointikeskus (RR-keskus) on avoin, tutkijoiden ylläpitämä ei-kaupallinen yhteisö, joka suorittaa RR-tutkimuksen vertaisarviointia. RR-keskus tarjoaa palvelua erityisesti suomenkieliselle tutkimukselle. Avoimen tiedon keskus (OSC) ja Suomen RR-keskus aloittivat 1.12.2023 yhteistyön, ja OSC toimii Rekisteröidyt tutkimusraportit –julkaisusarjan julkaisijana.
“OSC halusi lähteä yhteistyöhön mukaan, sillä näemme tämän julkaisutoiminnan uudistavan tiedejulkaisemisen kenttää ja tarjoavan erinomaisen vaihtoehdon perinteiselle artikkelijulkaisemisen mallille”, toteavat palvelupäällikkö Arto Ikonen ja julkaisukoordinaattori Sini Tuikka.
RR-arviointi on mentorointia ja kollegiaalista tukea
Koska perinteisessä julkaisumallissa tutkimus on arviointivaiheessa jo suoritettu, vertaisarvioijien antama palaute keskittyy etenkin hylkäyksen ja hyväksymisen punnitsemiseen. Jos tutkimuksessa on merkittäviä puutteita, niitä on usein liian myöhäistä korjata ja tuloksena on hylkäys.
RR-prosessissa, joka alkaa ennen tutkimuksen suorittamista, arvioinnin päätehtävänä onkin auttaa tutkijoita rakentamaan paras mahdollinen tutkimus. Vaikka hylkäys on mahdollinen myös RR-prosessissa, se tapahtuu yleensä vain silloin, kun tutkijat eivät ole pystyneet toteuttamaan tutkimusta suunnitelman mukaisesti.
Koska työ arvioidaan jo suunnitelmavaiheessa, puutteita voidaan havaita oikeaan aikaan ja suuret ongelmat voidaan korjata. Erityisesti uran alussa olevat sekä uudenlaisia menetelmiä soveltavat tutkijat voivat näin saada arvokasta tukea.
RR-keskus tukee erilaisia julkaisukanavia
RR-keskus ei ole tieteellinen lehti, mutta sen arvioimat tutkimukset voidaan julkaista tieteellisissä lehdissä tai muilla julkaisualustoilla. Kaikki tieteellistä tutkimusta suomeksi julkaisevat lehdet voivat osallistua RR-keskuksen toimintaan yhteistyökumppaneina. Kumppanilehdet auttavat omien alojensa asiantuntijoiden löytämisessä vertaisarvioinnin aikana ja ovat lähtökohtaisesti kiinnostuneita julkaisemaan RR-keskuksen arvioimia tutkimuksia. Lehti saa tiedon RR-keskuksen arviointiin tarjotuista ja arvioinnin läpäisseistä oman alansa tutkimuksista, mutta ei ole velvoitettu julkaisemaan niitä.
”Kansainvälisesti RR-arvioinnin kehittäminen sai yhden alkusysäyksen psykologian alalla havaituista perinteiseen vertaisarviointiin ja julkaisemiseen liittyvistä ongelmista. Siksi on luontevaa, että Psykologia-lehti on Suomessa mukana tarjoamassa yhden julkaisualustan rekisteröidyille tutkimusraporteille. Kannustankin tutkijoita tutustumaan RR-prosessiin ja miettimään miten oma tutkimus hyötyisi RR-arvioinnista”, Psykologia-lehden päätoimittaja Eemeli Hakoköngäs toteaa.
Tutkijat voivat osallistua RR-keskuksen työhön joko arvioijana tai suosittelijana. Vastaavan toimittajan tavoin suosittelija järjestää ja valvoo vertaisarviointiprosesseja. Jokaisen suosittelijan tulee kuitenkin läpäistä riippumaton kansainvälinen RR-testi, mikä varmistaa, että käsikirjoituksia käsittelevät tutkijat ymmärtävät prosessin periaatteet.
Jyväskylän yliopisto vastaa vertaisarviointia varten rakenteilla olevan verkkoinfrastruktuurin ylläpitokustannuksista. RR-keskus tulee käyttämään arviointi- ja julkaisualustana omaa Open Journal System (OJS) -asennusta, jonka teknisestä toteutuksesta ja ylläpidosta vastaa Tieteellisten Seurain Valtuuskunta (TSV).
RR-arviointiprosessi auttaa laadun varmistamisessa
RR-tutkimuksen arviointiprosessin ensimmäisellä kierroksella arvioidaan tyypillisesti vain tutkimusasetelma, artikkelikäsikirjoituksesta siis johdanto ja menetelmäkuvaus. Kirjoittajat esittävät siinä tutkimuskysymyksensä, -menetelmänsä sekä suunnitelmansa aineiston analyysistä. Vertaisarvioinnin myötä suunnitelmaa parannetaan, kunnes se hyväksytään suoritettavaksi.
"Tuloksia ei siis tässä vaiheessa tiedetä, mikä onkin tarkoitus. Painotus on tutkimusprosessin ja menetelmien laadun arvioinnissa tutkimuksen tulosten kiinnostavuuden tai merkittävyyden arvottamisen sijaan", kuvailee RR-keskuksen perustaja- ja johtoryhmän edustaja Veli-Matti Karhulahti.
Toisessa vaiheessa, kun tutkimus on tehty, kirjoittajat lähettävät arvioitavaksi valmiin käsikirjoituksen. Arvioinnin kohteena tällä toisella kierroksella on se, miten tutkijat ovat toteuttaneet suunnitelmansa. Arviointiprosessin päätteeksi käsikirjoitus ja sen saamat arviot sekä päätöskirjeet julkaistaan. Molemmilla arviointikierroksilla noudatetaan Tieteellisten seurain valtuuskunnan vertaisarviointisuosituksia.
Koska suunnitelma ja toteutus arvioidaan avoimesti, tukee se luonnollisesti tutkimusprosessin läpinäkyvyyttä. Vertaisarvioinnissa voidaan toteuttaa avoimuutta eri asteissa. Arviot julkaistaan aina avoimesti, joten kirjoittajat voivat luottaa, että arvioija tekee työnsä rehellisesti. Hyvin tehty vertaisarviointi kertoo toki myös arvioijan osaamisesta ja näin hekin voivat saada tunnustusta työlleen.
Onnistuneen vertaisarvioinnin jälkeen RR-keskus sijoittaa tutkimuksen preprint-version avoimeen JYX-arkistoon. Tämän jälkeen tutkijat voivat neuvotella kiinnostuneiden tahojen kanssa työnsä julkaisusta. Vaihtoehtoisesti RR-keskuksessa arvioitu tutkimus voidaan julkaista suoraan OSC:n julkaisemassa uudessa Rekisteröidyt tutkimusraportit –sarjassa.
