Ohjelma-arviointi
Strategisen tutkimuksen neuvosto (STN) vastaa rahoittamansa tutkimuksen vaikuttavuuden arvioinnista. Arviointi toteutetaan ohjelmien tasolla. Tavoitteena on arvioida ohjelmien jo toteutunutta ja mahdollisesti tulevaisuudessa toteutuvaa tieteellistä ja yhteiskunnallista vaikuttavuutta sekä tuottaa tietoa strategisen tutkimuksen ohjelmien kehittämiseksi.
Arviointi kohdistuu kussakin ohjelmassa rahoitetun tutkimus- ja vuorovaikutustoiminnan kohdentumiseen, prosesseihin, tuloksiin ja tuotoksiin sekä niiden havaittuihin tai ennakoituihin vaikutuksiin. Arvioinnissa otetaan huomioon ohjelma- ja hankekohtaiset erityispiirteet. Tieteellisen vaikuttavuuden arviointi kiinnittää huomiota erityisesti monitieteisen työskentelyn tuloksellisuuteen ja kykyyn uudistaa tutkimusta ohjelmakuvauksessa tunnistettujen haasteiden ratkomiseksi.
Ohjelma-arvioinnin periaatteet löytyvät kokonaisuudessaan STN:n rahoitusperiaatteista.
Vuonna 2019 päättyneet ohjelmat
Vuosina 2016–2019 toimineiden neljän tutkimusohjelman arviointikokonaisuus oli ensimmäinen strategisen tutkimuksen vastuualueen koordinoima ohjelma-arviointi. Arvioinnin kohteena olivat seuraavat strategisen tutkimuksen ohjelmat:
- Kaupungistuva yhteiskunta (URBAN)
- Terveys, hyvinvointi ja elämäntavat (HEALTH)
- Osaavat työntekijät – menestyvät työmarkkinat (WORK)
- Turvallisuus verkottuneessa maailmassa (SECURITY)
Tutustu näiden tutkimusohjelmien arviointeihin:
- Strategisen tutkimuksen ohjelmat 2016–2019: Yhteiskunnallisen vaikuttavuuden arviointi (pdf)
- Strategisen tutkimuksen ohjelmat 2016–2019: Itsearviointiraportit (pdf)
- Strategic Research Programmes 2016–2019: Ex-post evaluation of scientific activities (pdf)
Lue lisää ohjelma-arvioinnin julkaisutiedotteista ja uutisista:
- Arviointi: strategisen tutkimuksen rahoitus tuonut lisäarvoa tutkimukseen ja yhteiskuntaan (28.1.2021)
- Strategisen tutkimuksen ohjelmien yhteiskunnallista vaikuttavuutta arvioitiin ensimmäistä kertaa (3.2.2021)
- Arviointi: monitieteinen strateginen tutkimus tukee koko yhteiskuntaa (14.6.2021)
Arvioinnin toteutus
HEALTH, SECURITY, URBAN ja WORK-ohjelmien arviointi toteutettiin vuosien 2020–2021 aikana kolmessa vaiheessa.
Itsearviointi
Ohjelma-arvioinnin ensimmäisen vaiheen tavoitteena oli muodostaa tutkimusohjelman toimijoiden jaettu ymmärrys ohjelman toiminnasta. Itsearviointi toteutettiin ohjelmakohtaisina keskustelutilaisuuksina, joiden tuloksena syntyi analyysi kunkin ohjelman toiminnasta. Keskusteluissa käsiteltiin kaikkia ohjelma-arvioinnin tavoitteita. Keskustelujen muistiot toimivat aineistona arvioinnin seuraavassa vaiheessa.
Yhteiskunnallisen vaikuttavuuden arviointi
Toisessa vaiheessa tavoitteena oli ymmärtää STN-ohjelmien yhteiskunnallista ulottuvuutta. Yhteiskunnallisen vaikuttavuuden arviointia lähestyttiin IOOI (input-output-outcome-impact) viitekehyksestä käsin. Huomiota kiinnitettiin moninaisiin vaikuttavuuspolkuihin, erityisesti ohjelmien sidosryhmäverkostoissa tehtyyn vuorovaikutukseen ja verkostojen muutoksiin. Yhteiskunnallisen vaikuttavuuden arvioinnin toteutti ulkopuolinen arvioija, Gaia-Consulting Oy.
Tieteellisen toiminnan arviointi
Ohjelma-arvioinnin kolmannessa vaiheessa arvioitiin ohjelmien monitieteisyyttä, tieteellistä laatua sekä tutkimuksen ja yhteiskunnallisen vaikuttavuuden yhteyksiä. Arvioinnissa hyödynnettiin monipuolista aineistoa. Arvioinnin toteutti ulkopuolinen asiantuntijapaneeli.
Lue lisää ohjelma-arvioinnista strategisen tutkimuksen vastuualueen virkamiesten Jyrki Hakapään ja Kyösti Husson blogikirjoituksista:
- Strategisen tutkimuksen tulosten jäljillä 22.8.2019
- Kohti tutkimus- ja vuorovaikutustyön kokonaisvaltaista arviointia 7.4.2020
- Strateginen tutkimus: Mitä siitä seuraa? 21.9.2021
Vuonna 2019 päättyneet ohjelmat löydät Ohjelmat ja hankkeet -sivun alaosan pudotusvalikosta.
Vuonna 2021 päättyneet ohjelmat
Vuosien 2022–2023 aikana toteutetaan neljän tutkimusohjelman arviointi:
- Ilmastoneutraali ja resurssiniukka Suomi, PIHI (2015–2021)
- Tasa-arvoinen yhteiskunta, EQUA (2015–2021)
- Teknologiamurrokset ja muuttuvat instituutiot, TECH (2015–2021)
- Muuttuvat hallinnan tavat ja aktiivinen kansalaisuus, CITIZEN (2017–2021)
Arvioinnin toteutus
Arviointiin sisältyy ohjelmien itsearviointi, ohjelmien ulkopuolinen arviointi sekä ohjelmakohtaisten arviointitulosten yhteenveto ja johtopäätökset.
Itsearviointi
Ohjelmien itsearviointi koostuu ohjelmien toimijoille kohdistetuista kyselyistä ja ohjelmakohtaisista keskustelutilaisuuksista. Kyselyt suunnataan hankkeiden ja ohjelmajohtajien tärkeimmille sidosryhmille ja vuorovaikutuskumppaneille sekä ohjelmissa rahoitetuille hankkeille. Ohjelmakohtaisissa keskustelutilaisuuksissa pohditaan ohjelman merkitystä ja vaikutuksia mm. kyselytulosten valossa. Itsearviointi tuottaa aineistoa ohjelmien ulkopuolista arviointia varten.
Ulkopuolinen arviointi
Ohjelmien ulkopuolisen arvioinnin tekevät ohjelmakohtaiset asiantuntijapaneelit, jotka kootaan ohjelman teema-alueen kotimaisista ja ulkomaisista asiantuntijoista. Asiantuntijapaneelin tehtävänä on arvioida sekä ohjelman tieteellistä että sen yhteiskunnallista vaikuttavuutta.
Yhteenveto ja johtopäätökset
Asiantuntijapaneelit keskustelevat arviointituloksista ja havainnoistaan yhdessä STN:n kanssa. Keskustelulla nostetaan esille ohjelmakohtaisten arviointien tärkeimmät tulokset ja keinot niiden hyödyntämiseksi strategisen tutkimuksen ohjelmien kehittämisessä.
Vuonna 2021 päättyneet ohjelmat löydät Ohjelmat ja hankkeet -sivun alaosan pudotusvalikosta.
Lisätietoja
- johtava tiedeasiantuntija Jyrki Hakapää, puh. 029 533 5020
- tiedeasiantuntija Katri Huutoniemi, puh. 029 533 5195
Sähköpostimme ovat muotoa etunimi.sukunimi(at)aka.fi.
