Ohjelma-arviointi
Strategisen tutkimuksen neuvosto (STN) vastaa rahoittamansa tutkimuksen vaikuttavuuden arvioinnista. Arviointi toteutetaan ohjelmien tasolla. Tavoitteena on arvioida ohjelmien jo toteutunutta ja mahdollisesti tulevaisuudessa toteutuvaa tieteellistä ja yhteiskunnallista vaikuttavuutta sekä tuottaa tietoa strategisen tutkimuksen ohjelmien kehittämiseksi.
Arviointi kohdistuu kussakin ohjelmassa rahoitetun tutkimus- ja vuorovaikutustoiminnan kohdentumiseen, prosesseihin, tuloksiin ja tuotoksiin sekä niiden havaittuihin tai ennakoituihin vaikutuksiin. Arvioinnissa otetaan huomioon ohjelma- ja hankekohtaiset erityispiirteet. Tieteellisen vaikuttavuuden arviointi kiinnittää huomiota erityisesti monitieteisen työskentelyn tuloksellisuuteen ja kykyyn uudistaa tutkimusta ohjelmakuvauksessa tunnistettujen haasteiden ratkomiseksi.
Ohjelma-arvioinnin periaatteet löytyvät kokonaisuudessaan STN:n rahoitusperiaatteista.
Vuonna 2021 päättyneet ohjelmat
Vuosien 2022–2023 aikana toteutettiin strategisen tutkimuksen vastuualueen koordinoimana neljän tutkimusohjelman arviointi:
- Tasa-arvoinen yhteiskunta, EQUA (2015–2021)
- Ilmastoneutraali ja resurssiniukka Suomi, PIHI (2015–2021)
- Teknologiamurrokset ja muuttuvat instituutiot, TECH (2015–2021)
- Muuttuvat hallinnan tavat ja aktiivinen kansalaisuus, CITIZEN (2017–2021)
Tutustu näiden tutkimusohjelmien arviointeihin (raporttien kieli on englanti):
- Equality in Society, EQUA (2015–2021). Evaluation of the strategic research programme. (pdf, englanniksi)
- A Climate-Neutral and Resource-Scarce Finland, PIHI (2015–2021). Evaluation of the strategic research programme. (pdf, englanniksi)
- Disruptive Technologies and Changing Institutions, TECH (2015–2021). Evaluation of the strategic research programme. (pdf, englanniksi)
- Changing Society and Active Citizenship, CITIZEN (2017–2021). Evaluation of the strategic research programme. (pdf, englanniksi)
Arvioinnin toteutus
EQUA-, PIHI-, TECH- ja CITIZEN-ohjelmien arviointi toteutettiin neljässä ohjelmakohtaisessa asiantuntijapaneelissa, joihin kutsuttiin ulkomaisia ja kotimaisia asiantuntijoita ohjelman teema-alueelta.
Arviointi asiantuntijapaneeleissa
Kunkin neljän asiantuntijapaneelin tehtävänä oli arvioida ohjelman toteutusta, tuloksia ja vaikuttavuutta seuraavien arviointikriteerien perusteella:
- korkeatasoisen, monitieteisen tutkimuksen edistäminen ohjelman teema-alueen ongelmista ja tarpeista
- konkreettisten toimien luominen näiden ongelmien ja tarpeiden ratkaisemiseksi suomalaisessa yhteiskunnassa
- tutkimus- ja sidosryhmäyhteisöjen ja niiden välisten yhteyksien vahvistaminen ohjelman teema-alueella
Paneelit tekivät havaintojensa perusteella myös johtopäätöksiä ja suosituksia STN-ohjelmien kehittämiseksi tulevaisuudessa.
Arvioinnin aineistot
Strategisen tutkimuksen vastuualue toimitti kullekin asiantuntijapaneelille kattavan aineiston arvioitavan ohjelman taustoista, tuloksista ja vaikutuksista. Arviointimateriaaliin sisältyi myös tulokset kahdesta kyselystä, joista toinen oli suunnattu hankkeiden edustajille ja toinen hankkeiden tärkeimmille vuorovaikutuskumppaneille. Lisäksi kukin paneeli haastatteli ohjelman keskeisiä toimijoita. Kunkin ohjelman aineistoista tehdyt yhteenvedot on julkaistu arviointiraportin liitteenä.
Vuonna 2021 päättyneet ohjelmat löydät Ohjelmat ja hankkeet -sivun alaosan pudotusvalikosta.
Vuonna 2019 päättyneet ohjelmat
Vuosina 2016–2019 toimineiden neljän tutkimusohjelman arviointikokonaisuus oli ensimmäinen strategisen tutkimuksen vastuualueen koordinoima ohjelma-arviointi. Arvioinnin kohteena olivat seuraavat strategisen tutkimuksen ohjelmat:
- Kaupungistuva yhteiskunta (URBAN)
- Terveys, hyvinvointi ja elämäntavat (HEALTH)
- Osaavat työntekijät – menestyvät työmarkkinat (WORK)
- Turvallisuus verkottuneessa maailmassa (SECURITY)
Tutustu näiden tutkimusohjelmien arviointeihin:
- Strategisen tutkimuksen ohjelmat 2016–2019: Yhteiskunnallisen vaikuttavuuden arviointi (pdf)
- Strategisen tutkimuksen ohjelmat 2016–2019: Itsearviointiraportit (pdf)
- Strategic Research Programmes 2016–2019: Ex-post evaluation of scientific activities (pdf)
Lue lisää ohjelma-arvioinnin julkaisutiedotteista ja uutisista:
- Arviointi: strategisen tutkimuksen rahoitus tuonut lisäarvoa tutkimukseen ja yhteiskuntaan (28.1.2021)
- Strategisen tutkimuksen ohjelmien yhteiskunnallista vaikuttavuutta arvioitiin ensimmäistä kertaa (3.2.2021)
- Arviointi: monitieteinen strateginen tutkimus tukee koko yhteiskuntaa (14.6.2021)
Arvioinnin toteutus
HEALTH, SECURITY, URBAN ja WORK-ohjelmien arviointi toteutettiin vuosien 2020–2021 aikana kolmessa vaiheessa.
Itsearviointi
Ohjelma-arvioinnin ensimmäisen vaiheen tavoitteena oli muodostaa tutkimusohjelman toimijoiden jaettu ymmärrys ohjelman toiminnasta. Itsearviointi toteutettiin ohjelmakohtaisina keskustelutilaisuuksina, joiden tuloksena syntyi analyysi kunkin ohjelman toiminnasta. Keskusteluissa käsiteltiin kaikkia ohjelma-arvioinnin tavoitteita. Keskustelujen muistiot toimivat aineistona arvioinnin seuraavassa vaiheessa.
Yhteiskunnallisen vaikuttavuuden arviointi
Toisessa vaiheessa tavoitteena oli ymmärtää STN-ohjelmien yhteiskunnallista ulottuvuutta. Yhteiskunnallisen vaikuttavuuden arviointia lähestyttiin IOOI (input-output-outcome-impact) viitekehyksestä käsin. Huomiota kiinnitettiin moninaisiin vaikuttavuuspolkuihin, erityisesti ohjelmien sidosryhmäverkostoissa tehtyyn vuorovaikutukseen ja verkostojen muutoksiin. Yhteiskunnallisen vaikuttavuuden arvioinnin toteutti ulkopuolinen arvioija, Gaia-Consulting Oy.
Tieteellisen toiminnan arviointi
Ohjelma-arvioinnin kolmannessa vaiheessa arvioitiin ohjelmien monitieteisyyttä, tieteellistä laatua sekä tutkimuksen ja yhteiskunnallisen vaikuttavuuden yhteyksiä. Arvioinnissa hyödynnettiin monipuolista aineistoa. Arvioinnin toteutti ulkopuolinen asiantuntijapaneeli.
Lue lisää ohjelma-arvioinnista strategisen tutkimuksen vastuualueen virkamiesten Jyrki Hakapään ja Kyösti Husson blogikirjoituksista:
- Strategisen tutkimuksen tulosten jäljillä 22.8.2019
- Kohti tutkimus- ja vuorovaikutustyön kokonaisvaltaista arviointia 7.4.2020
- Strateginen tutkimus: Mitä siitä seuraa? 21.9.2021
Vuonna 2019 päättyneet ohjelmat löydät Ohjelmat ja hankkeet -sivun alaosan pudotusvalikosta.
Lisätietoja
- tiedeasiantuntija Katri Huutoniemi, puh. 029 533 5195
- johtava tiedeasiantuntija Otto Auranen, puh. 029 533 5141
- tiedeasiantuntija Katri Mäkinen-Rostedt, puh. 029 5 335 181
Sähköpostimme ovat muotoa etunimi.sukunimi(at)aka.fi.
