Hyte-sote-toimintamallien arviointijärjestelmä

Arviointiprosessi sisältää seitsemän vaihetta:

1. Toimintamallin lähetys arviointiin
2. Hyväksyntä arviointiin
3. Toimintamallin kuvaus
4. Tieteellinen vertaisarviointi
5. Taitto ja oikoluku
6. Julkaisu, arkistointi ja viestintä
7. Toimintamallien haku- ja vertailu
    

Arvioinnin kohde

Hyte-sote-toimintamallien arvioinnissa arvioidaan näyttöön perustuviin menetelmiä ja toimintamalleja kaikilta yhteiskunnan sektoreilta, jotka edistävät hyvinvointia, terveyttä, toimintakykyä, turvallisuutta, osallisuutta, yhdenvertaisuutta ja oikeudenmukaisuutta, sekä edistävät sosiaalisesti, taloudellisesti ja ekologisesti kestävää kehitystä. 
Voit ehdottaa näyttöön perustuvaa menetelmää arviointiin: hytearviointi@thl.fi

Menetelmänä tieteellinen vertaisarviointi yhteismitallisin arviointikriteerein

Hyte-sote-toimintamallien arviointi perustuu tieteelliseen vertaisarviointiin yhteismitallisin arviointikriteerein, avoimen tieteen periaatteita mukaillen. Arvioinnin luonne on kehittävä. 

Pääpaino on toimintamallin systemaattisella kuvauksella, josta vastaa toimintamallin edustaja/t. Arvioinnista vastaavat vähintään kaksi vertaisarvioitsijaa, jotka ovat toimituksen ulkopuolisia ja arvioitavana olevan toimintamallin suhteen riippumattomia asiantuntijoita. Arvioinnissa on usein kolme vertaisarvioitsijaa: Kaksi tekee itsenäisen lausunnon ja kolmas tekee niistä yhteenvedon, joka julkaistaan arviointiraportin yhteydessä Hyte-sote-toimintamallien julkaisusarjassa. 
 

Arviointiluokat

Toimintamallit arvioidaan kolmen eri näytön perusteella:

1. Tieteelliseen tietoon perustuva (vertaisarvioidut julkaisut vaikuttavuudesta)
2. Asiantuntijatietoon perustuva (selvitykset ja laskelmat vaikuttavuudesta)
3. Kokemustietoon perustuva (arkitieto vaikutuksista ja toimivuudesta)

Jokaisessa arviointiluokassa voi saada 1–5 pistettä. Näiden keskiarvo on kokonaispisteytys.

Lisäksi vertaisarvioinnin yhteydessä raportoidaan toimintamallin vaihe:

• Uusi toimintamalli (alle 5 vuotta)
• Käyttöön vakiintunut toimintamalli (5–10 vuotta)
• Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
   

Arviointiasteikko

Kun toimintamalli on luokiteltu arviointiluokkaan, se arvioidaan arvioitsijoiden toimesta osa-alueittain asteikolla 1–5. Osa-alueet sisältävät alakriteerejä, joista annetaan arvio ko. asteikolla. Osa-alueista muodostuu lopuksi toimintamallin kokonaisarviointi asteikolla 1–5.

5 = erinomainen     

4 = kiitettävä 

3 = hyvä 

2 = tyydyttävä 

1 = heikko

Arviointiperusteet

Jotta arvioinnit olisivat mahdollisimman yhteismitallisia, arviointia tukemaan on kehitetty kirjalliset arviointiperusteet. Niistä on hyötyä sekä arvioitsijalle että toimintamallien edustajalle.
 

Arviointikierrokset

Toimintamallin arviointi saattaa edellyttää useita arviointikierroksia. Toimintamallien edustajat vastaavat mahdollisiin tarkennuspyyntöihin ja lähettävät toimintamallin kuvauksen toimitukseen ehdotetuin parannuksin. Toisen arviointikierroksen aikana voidaan käydä myös vuoropuhelua toimintamallin edustajan ja arvioitsijoiden välillä. Toimitus päättää toimintamallin arvioinnin hyväksymisestä ja julkaisemisesta.
 

Taitto ja oikoluku

Ennen arviointiraportin julkaisua taittaja siirtää toimintamallin kuvauksen ja arvioinnin taittopohjalle, ja lähettää tekstin oikoluettavaksi toimintamallin edustajalle. Taiton ja oikoluvun tuotos on arviointiraportti.
 

Arviointiraporttien julkaisu ja arkistointi

THL huolehtii arviointien arkistoinnista. Varmistamme, että arvioinnit ovat helposti löydettävissä, käytettävissä ja pitkäaikaisessa säilytyksessä. Toimintamallien arvioinnit arkistoidaan avoimeen julkaisuarkisto Julkariin, joka on vapaasti käytettävissä, eikä siihen tarvitse rekisteröityä. Julkariin arkistoidut tiedot arvioinnin tuloksista ovat julkisia.
 

Arviointien etiikka

Arvioinnissa sovelletaan tieteellisten kriteerien mukaisia periaatteita ja eettisesti kestäviä arviointimenetelmiä. Toimintamallin edustaja ja arvioitsijat sitoutuvat edistämään Tutkimuseettisen neuvottelukunnan hyvien tieteellisten käytänteiden mukaisia periaatteita.  Lue lisää hyvästä tieteellisestä käytännöstä
 

Toimintamallin tekijyys

Toimintamallin tekijyys on tunnustus luovaan prosessiin osallistumisesta ja osoittaa vastuuta sisällöstä ja tuloksista. On tärkeää, että toimintamallin arviointiin lähettänyt henkilö on joko toimintamallista vastaava henkilö tai mukana arviointiprosessissa. Toimintamallien edustajien on hyvä sopia etukäteen kuka lähettää toimintamallin arviointiin ja miten tekijät ilmoitetaan arvioinnin yhteydessä. Tekijänoikeudet pysyy toimintamallien edustajilla.