Arviointijärjestelmä

Arviointijärjestelmä

HYTE-toimintamallien arvioinnille on kehitetty uusi arviointijärjestelmä

Arviointijärjestelmässä toimintamallien edustajat vastaavat näyttöön perustuvan menetelmän kuvauksesta yhteismitallisille arviointikriteereille. Arvioitsijat vastaavat tieteellisen vertaisarvioinnin tekemisestä yhteismitallisilla arviointikriteereillä. Arvioinnin toimitus johtaa ja hallinnoi arviointiprosesseja.

Arviointiprosessi sisältää seitsemän vaihetta:

  1. Toimintamallin lähetys arviointiin
  2. Hyväksyntä arviointiin
  3. Toimintamallin kuvaus
  4. Tieteellinen vertaisarviointi
  5. Taitto ja oikoluku
  6. Julkaisu, arkistointi ja viestintä
  7. Toimintamallien haku- ja vertailu
     

Arvioinnin kohde

HYTE-toimintamallien arvioinnissa arvioidaan näyttöön perustuviin menetelmiä ja toimintamalleja kaikilta yhteiskunnan sektoreilta, jotka edistävät hyvinvointia, terveyttä, toimintakykyä, turvallisuutta, osallisuutta, yhdenvertaisuutta ja oikeudenmukaisuutta, sekä edistävät sosiaalisesti, taloudellisesti ja ekologisesti kestävää kehitystä. 
Voit ehdottaa näyttöön perustuvaa menetelmää arviointiin: hytearviointi@thl.fi


Menetelmänä tieteellinen vertaisarviointi yhteismitallisin arviointikriteerein

HYTE-toimintamallien arviointi perustuu tieteelliseen vertaisarviointiin yhteismitallisin arviointikriteerein, avoimen tieteen periaatteita mukaillen. Arvioinnin luonne on kehittävä. 

Pääpaino on toimintamallin systemaattisella kuvauksella, josta vastaa toimintamallin edustaja/t. Arvioinnista vastaavat vähintään kaksi vertaisarvioitsijaa, jotka ovat toimituksen ulkopuolisia ja arvioitavana olevan toimintamallin suhteen riippumattomia asiantuntijoita. Arvioinnissa on usein kolme vertaisarvioitsijaa: Kaksi tekee itsenäisen lausunnon ja kolmas tekee niistä yhteenvedon, joka julkaistaan arviointiraportin yhteydessä HYTE-toimintamalli-julkaisusarjassa. 
 

Arviointiluokat

Toimintamalli luokitellaan ensin arviointiluokkaan:

  1. Tieteelliseen tietoon perustuva (vertaisarvioidut julkaisut vaikuttavuudesta)
  • Uusi toimintamalli (alle 4 vuotta)
  • Käytössä oleva toimintamalli (5–10 vuotta)
  • Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
  1. Asiantuntijatietoon perustuva (selvitykset ja laskelmat vaikuttavuudesta)
  • Uusi toimintamalli (alle 4 vuotta)
  • Käytössä oleva toimintamalli (5–10 vuotta)
  • Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
  1. Kokemustietoon perustuva (arkitieto vaikutuksista ja toimivuudesta)
  • Uusi toimintamalli (alle 4 vuotta)
  • Käytössä oleva toimintamalli (5–10 vuotta)
  • Pitkään käytössä ollut toimintamalli (yli 10 vuotta)

Jokaisessa arviointiluokassa voi saada 1–5 pistettä.
 

Arviointiasteikko

Kun toimintamalli on luokiteltu arviointiluokkaan, se arvioidaan arvioitsijoiden toimesta osa-alueittain asteikolla 1–5. Osa-alueet sisältävät alakriteerejä, joista annetaan arvio ko. asteikolla. Osa-alueista muodostuu lopuksi toimintamallin kokonaisarviointi asteikolla 1–5.

5 = erinomainen     

4 = kiitettävä 

3 = hyvä 

2 = tyydyttävä 

1 = heikko

 

Arviointiperusteet

Jotta arvioinnit olisivat mahdollisimman yhteismitallisia, arviointia tukemaan on kehitetty kirjalliset arviointiperusteet. Niistä on hyötyä sekä arvioitsijalle että toimintamallien edustajalle.
 

Arviointikierrokset

Toimintamallin arviointi saattaa edellyttää useita arviointikierroksia. Toimintamallien edustajat vastaavat mahdollisiin tarkennuspyyntöihin ja lähettävät toimintamallin kuvauksen toimitukseen ehdotetuin parannuksin. Toisen arviointikierroksen aikana voidaan käydä myös vuoropuhelua toimintamallin edustajan ja arvioitsijoiden välillä. Toimitus päättää toimintamallin arvioinnin hyväksymisestä ja julkaisemisesta.
 

Taitto ja oikoluku

Ennen arviointiraportin julkaisua taittaja siirtää toimintamallin kuvauksen ja arvioinnin taittopohjalle, ja lähettää tekstin oikoluettavaksi toimintamallin edustajalle. Taiton ja oikoluvun tuotos on arviointiraportti.
 

Arviointiraporttien julkaisu ja arkistointi

THL huolehtii arviointien arkistoinnista. Varmistamme, että arvioinnit ovat helposti löydettävissä, käytettävissä ja pitkäaikaisessa säilytyksessä. Toimintamallien arvioinnit arkistoidaan avoimeen julkaisuarkisto Julkariin, joka on vapaasti käytettävissä, eikä siihen tarvitse rekisteröityä. Julkariin arkistoidut tiedot arvioinnin tuloksista ovat julkisia.
 

Arviointien etiikka

Arvioinnissa sovelletaan tieteellisten kriteerien mukaisia periaatteita ja eettisesti kestäviä arviointimenetelmiä. Toimintamallin edustaja ja arvioitsijat sitoutuvat edistämään Tutkimuseettisen neuvottelukunnan hyvien tieteellisten käytänteiden mukaisia periaatteita.  Lue lisää hyvästä tieteellisestä käytännöstä
 

Toimintamallin tekijyys

Toimintamallin tekijyys on tunnustus luovaan prosessiin osallistumisesta ja osoittaa vastuuta sisällöstä ja tuloksista. On tärkeää, että toimintamallin arviointiin lähettänyt henkilö on joko toimintamallista vastaava henkilö tai mukana arviointiprosessissa. Toimintamallien edustajien on hyvä sopia etukäteen kuka lähettää toimintamallin arviointiin ja miten tekijät ilmoitetaan arvioinnin yhteydessä. Tekijänoikeudet pysyy toimintamallien edustajilla.
 

HYTE-toimintamallien arvioinnin yhteystiedot ja lisätietoa:

Marika Kylänen
Projektipäällikkö

Ennaltaehkäisevän työn vaikuttavuus -tiimi
Edistävä ja ehkäisevä työ -yksikkö

etunimi.sukunimi@thl.fi
029 -524 7882

Kuva
HYTE-EU-logot