Arviointijärjestelmä
Arviointijärjestelmä
HYTE-toimintamallien arvioinnille on kehitetty uusi arviointijärjestelmä
Arviointijärjestelmässä toimintamallien edustajat vastaavat näyttöön perustuvan menetelmän kuvauksesta yhteismitallisille arviointikriteereille. Arvioitsijat vastaavat tieteellisen vertaisarvioinnin tekemisestä yhteismitallisilla arviointikriteereillä. Arvioinnin toimitus johtaa ja hallinnoi arviointiprosesseja.
TUTUSTU ARVIOINTIMATERIAALEIHIN
Esittely toimintamallien edustajille ja arvioitsijoille
TOIMINTAMALLIN EDUSTAJAN LOMAKKEET
Toimintamallin soveltuvuus arviointiin
Toimintamallin kuvaus
Itsearviointilomake HYTE-toimintamallien arviointiin
ARVIOITSIJAN LOMAKKEET
Arviointilomake
Arviointikriteerit
Arviointiprosessi sisältää seitsemän vaihetta:
- Toimintamallin lähetys arviointiin
- Hyväksyntä arviointiin
- Toimintamallin kuvaus
- Tieteellinen vertaisarviointi
- Taitto ja oikoluku
- Julkaisu, arkistointi ja viestintä
- Toimintamallien haku- ja vertailu
Arvioinnin kohde
HYTE-toimintamallien arvioinnissa arvioidaan näyttöön perustuviin menetelmiä ja toimintamalleja kaikilta yhteiskunnan sektoreilta, jotka edistävät hyvinvointia, terveyttä, toimintakykyä, turvallisuutta, osallisuutta, yhdenvertaisuutta ja oikeudenmukaisuutta, sekä edistävät sosiaalisesti, taloudellisesti ja ekologisesti kestävää kehitystä.
Voit ehdottaa näyttöön perustuvaa menetelmää arviointiin: hytearviointi@thl.fi
Menetelmänä tieteellinen vertaisarviointi yhteismitallisin arviointikriteerein
HYTE-toimintamallien arviointi perustuu tieteelliseen vertaisarviointiin yhteismitallisin arviointikriteerein, avoimen tieteen periaatteita mukaillen. Arvioinnin luonne on kehittävä.
Pääpaino on toimintamallin systemaattisella kuvauksella, josta vastaa toimintamallin edustaja/t. Arvioinnista vastaavat vähintään kaksi vertaisarvioitsijaa, jotka ovat toimituksen ulkopuolisia ja arvioitavana olevan toimintamallin suhteen riippumattomia asiantuntijoita. Arvioinnissa on usein kolme vertaisarvioitsijaa: Kaksi tekee itsenäisen lausunnon ja kolmas tekee niistä yhteenvedon, joka julkaistaan arviointiraportin yhteydessä HYTE-toimintamalli-julkaisusarjassa.
Arviointiluokat
Toimintamalli luokitellaan ensin arviointiluokkaan:
- Tieteelliseen tietoon perustuva (vertaisarvioidut julkaisut vaikuttavuudesta)
- Uusi toimintamalli (alle 4 vuotta)
- Käytössä oleva toimintamalli (5–10 vuotta)
- Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
- Asiantuntijatietoon perustuva (selvitykset ja laskelmat vaikuttavuudesta)
- Uusi toimintamalli (alle 4 vuotta)
- Käytössä oleva toimintamalli (5–10 vuotta)
- Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
- Kokemustietoon perustuva (arkitieto vaikutuksista ja toimivuudesta)
- Uusi toimintamalli (alle 4 vuotta)
- Käytössä oleva toimintamalli (5–10 vuotta)
- Pitkään käytössä ollut toimintamalli (yli 10 vuotta)
Jokaisessa arviointiluokassa voi saada 1–5 pistettä.
Arviointiasteikko
Kun toimintamalli on luokiteltu arviointiluokkaan, se arvioidaan arvioitsijoiden toimesta osa-alueittain asteikolla 1–5. Osa-alueet sisältävät alakriteerejä, joista annetaan arvio ko. asteikolla. Osa-alueista muodostuu lopuksi toimintamallin kokonaisarviointi asteikolla 1–5.
5 = erinomainen
4 = kiitettävä
3 = hyvä
2 = tyydyttävä
1 = heikko
Arviointiperusteet
Jotta arvioinnit olisivat mahdollisimman yhteismitallisia, arviointia tukemaan on kehitetty kirjalliset arviointiperusteet. Niistä on hyötyä sekä arvioitsijalle että toimintamallien edustajalle.
Arviointikierrokset
Toimintamallin arviointi saattaa edellyttää useita arviointikierroksia. Toimintamallien edustajat vastaavat mahdollisiin tarkennuspyyntöihin ja lähettävät toimintamallin kuvauksen toimitukseen ehdotetuin parannuksin. Toisen arviointikierroksen aikana voidaan käydä myös vuoropuhelua toimintamallin edustajan ja arvioitsijoiden välillä. Toimitus päättää toimintamallin arvioinnin hyväksymisestä ja julkaisemisesta.
Taitto ja oikoluku
Ennen arviointiraportin julkaisua taittaja siirtää toimintamallin kuvauksen ja arvioinnin taittopohjalle, ja lähettää tekstin oikoluettavaksi toimintamallin edustajalle. Taiton ja oikoluvun tuotos on arviointiraportti.
Arviointiraporttien julkaisu ja arkistointi
THL huolehtii arviointien arkistoinnista. Varmistamme, että arvioinnit ovat helposti löydettävissä, käytettävissä ja pitkäaikaisessa säilytyksessä. Toimintamallien arvioinnit arkistoidaan avoimeen julkaisuarkisto Julkariin, joka on vapaasti käytettävissä, eikä siihen tarvitse rekisteröityä. Julkariin arkistoidut tiedot arvioinnin tuloksista ovat julkisia.
Arviointien etiikka
Arvioinnissa sovelletaan tieteellisten kriteerien mukaisia periaatteita ja eettisesti kestäviä arviointimenetelmiä. Toimintamallin edustaja ja arvioitsijat sitoutuvat edistämään Tutkimuseettisen neuvottelukunnan hyvien tieteellisten käytänteiden mukaisia periaatteita. Lue lisää hyvästä tieteellisestä käytännöstä
Toimintamallin tekijyys
Toimintamallin tekijyys on tunnustus luovaan prosessiin osallistumisesta ja osoittaa vastuuta sisällöstä ja tuloksista. On tärkeää, että toimintamallin arviointiin lähettänyt henkilö on joko toimintamallista vastaava henkilö tai mukana arviointiprosessissa. Toimintamallien edustajien on hyvä sopia etukäteen kuka lähettää toimintamallin arviointiin ja miten tekijät ilmoitetaan arvioinnin yhteydessä. Tekijänoikeudet pysyy toimintamallien edustajilla.
HYTE-toimintamallien arvioinnin yhteystiedot ja lisätietoa:
Marika Kylänen
Projektipäällikkö
Ennaltaehkäisevän työn vaikuttavuus -tiimi
Edistävä ja ehkäisevä työ -yksikkö
etunimi.sukunimi@thl.fi
029 -524 7882
Kuva