734 resultados para vaikuttavuuden arviointi
Resumo:
Työn tavoitteena oli tutkia Lappeenrannan teknillisen korkeakoulun (LTKK) Koulutus-ja kehittämiskeskuksen (KOKE) metallitekniikan yrityskehityshankkeiden vaikuttavuutta osallistuneiden pk-yritysten näkökulmasta. Aluksi selvitettiin kirjallisuuden perusteella kehitystoiminnan tarpeita perinteisillä teollisuuden aloilla ja siinä esiintyneitä ongelmia. Aineistoa tehtyjen hankkeiden arvioimiseksi hankittiin teemahaastatteluilla vuosina 1997-2002 hankkeissa mukana olleilta yrityksiltä. Tutkimuksen perusteella KOKEn toteuttamat hankkeet ovat olleet yrityslähtöisiä ja tulleet todelliseen kehitystarpeeseen. Hankkeiden määrä on kasvanut voimakkaasti 1990 -luvulla ja yhä laajempi joukko yrityksiä on saatu yliopiston vaikutuspiiriin. KOKE on toiminnallaan onnistunut madaltamaan pk-yritysten kynnystä osallistua yliopistoyhteistyöhön. Hankkeiden vetäjät tuntevat pk-yritykset ja niiden toimintatavat, jolloin vuorovaikutus ei jaa liian etäiseksi. Hankkeilla saavutettuja tuloksia pidetään yrityksissä merkittävinä ja niihin ollaan tyytyväisiä. Yliopisto koetaan eri kehityspalvelujen tarjoajana luotettavana ja uskottavana, eikä sen koeta tekevän kehitystyöllään bisnestä. Tutkimuksen perusteella voidaan todeta, että KOKEn rooli yrityskehitystoiminnassa on merkittävä ja se on tärkeä toimija yhteydenpidossa pk-yritysten ja yliopiston välillä. Se on onnistunut voittamaan ne ongelmat, joita kehitystyössä yleensä esiintyy.
Resumo:
Tutkimuksen tavoitteena on viranomaisyhteistyön suunnittelu- ja valmisteluprosessin vaikutusten arviointi ja selvittää minkälaiset tavoitteet viranomaisyhteistyölle on asetettu sekä miten asetetut tavoitteet on saavutettu ja kuinka viranomaisyhteistyön suunnittelu- ja valmisteluprosessia koordinoidaan. Lisäksi kartoitetaan kehitysesityksiä viranomaisyhteistyön suunnittelu- ja valmisteluprosessin tehostamiseksi ja kehittämiseksi hallintoyksikkö tasalla. Vaikuttavuuden arviointi on moniulotteinen kokonaisuus, jossa oleellista on löytää oikeat arviointi kohteet. Viranomaisyhteistyön kaltaisten abstraktien asioiden arvioinnissa toiminnan arviointi perustuu pääosin asiantuntijoiden näkemyksiin ja omakohtaisiin kokemuksiin tarkasteltavan asian tilasta. Arviointi on haastavaa, koska näkemykset voivat olla subjektiivisia tai toimintaympäristöön sidottuja. Viranomaisyhteistyö ymmärretään yleensä viranomaisten välisenä toimintana, jolla pyritään saavuttamaan säästöjä ja tehostamaan resurssien käyttöä. Viranomaisyhteistyön yhtenä tavoitteena tulisi olla myös lisäarvon tuottaminen omalle toiminnalle, esimerkiksi uusina toimintamalleina. Minkä tahansa toiminnan toteuttamiseksi on tärkeää määritellä yksityiskohtaiset tavoitteet. Nämä tavoitteet tulisi olla selvillä jo toimintaa tehdessä. Ilman, että toimijoilla on tavoitteet selvästi tiedossa, ei voida olettaa saatavan hyviä tuloksia aikaiseksi. Samoin toiminnan arviointi on lähes mahdotonta ilman tiedossa olevia tavoitteita. Ilman onnistunutta suunnittelu- ja valmisteluprosessia ei pystytä saavuttamaan operatiivisen viranomaisyhteistyönkään hyötyjä. Viranomaisyhteistyön suunnittelu- ja valmisteluprosessit eivät ole tällä hetkellä niin tehokkaita kuin niiden tulisi olla. Huono tehokkuus johtaa tässä yhteydessä myös vaikuttavuuden heikkenemiseen. Suunnittelu- ja valmisteluprosessin kehittämiskohteiksi todettiin oman resursoinnin lisääminen, organisaation sisäisen tiedonkulun parantaminen ja oman roolin tarkistaminen eri yhteistyöfoorumeissa.
Resumo:
Tässä pro gradu -tutkielmassa arvioin Turun kaupungin ympäristönsuojelutoimiston vuosina 1995–2000 toteuttamien projektien yhteiskunnallista vaikuttavuutta. Projektit ovat: muovijätteen kierrättämiseen keskittynyt KAPULA, ilmanlaadun seurannan kehittämiseen luotu City Simulator, eri sektorien väliseen ympäristöyhteistyöhön kannustanut Green Know-How Turku, Hirvensalon kaavoituksen tulevaisuutta valottanut ICTULA sekä kansainvälinen sähköautoprojekti EVD-POST. Kaikki viisi projektia on toteutettu yhteistyönä, ja osallistujina niissä on ollut ympäristönsuojelutoimiston lisäksi niin Turun alueen kuntia, yrityksiä kuin eurooppalaisia kaupunkejakin. Tutkielmassa arvioin projektien yhteiskunnallista vaikuttavuutta julkishallinnollisesta näkökulmasta. Tässä tapauksessa yhteiskunnallinen vaikuttavuus merkitsee muun muassa sitä, miten ympäristönsuojelutoimisto on vastannut sille asetettuihin tavoitteisiin ja miten toiminta on vastannut siihen kohdistuvia yhteiskunnallisia tarpeita. Tutkimukseni perusteella tarpeet ovat muodostuneet 1990-luvun Suomen talouslaman, 1980- ja 1990-lukujen globaalin ja EU:n ympäristöpolitiikan sekä 1990-luvun kaupunkistrategioiden ja ympäristönsuojeluohjelman kautta. Projektien arviointiin hyödynnän tavoitelähtöistä metodia Evert Vedungin Public Policy and Program Evaluation sekä Huey-Tsyh Chenin Theory-Driven Evaluations -teoksia. Metodilla tarkennan tavoitteiden, toimenpiteiden ja lopputulemien suhdetta. Sen lisäksi käytän Ray Pawsonin ja Nick Tilleyn Realistic Evaluation -kirjan realistista arviointitapaa, jolla tutkin kontekstin ja tehtyjen toimenpiteiden vaikutusta projekteissa. Projektien arvioinnin jälkeen kokoan yhteen päätelmiä projektien yhteiskunnallisesta vaikuttavuudesta ja pohdin syitä siihen, miksi projektit eroavat vaikuttavuudeltaan. Tutkielman johtopäätöksinä on, että projektit eroavat yhteiskunnalliselta vaikuttavuudeltaan lähtökohtien ja hyväksyttävyyden johdosta esimerkiksi lainsäädännön ja ympäristöpolitiikan vuoksi. Kyse on osaksi myös siitä, että joissain projekteissa tavoitteet on asetettu epärealistisiksi suhteessa niiden toteutumiseen. Projekteihin kohdistuvat ulkoiset tarpeet, toimintaympäristö ja realistiset tavoitteet eivät kuitenkaan ehdottomasti takaa yhteiskunnallista vaikuttavuutta. Myös yhteistyöprojektien toteuttajien ominaisuudet eli sisäiset tekijät vaikuttavat yhteiskunnallisen vaikuttavuuden ilmenemiseen.
Resumo:
Tässä pro gradu -tutkielmassa arvioin Turun kaupungin ympäristönsuojelutoimiston vuosina 1995–2000 toteuttamien projektien yhteiskunnallista vaikuttavuutta. Projektit ovat: muovijätteen kierrättämiseen keskittynyt KAPULA, ilmanlaadun seurannan kehittämiseen luotu City Simulator, eri sektorien väliseen ympäristöyhteistyöhön kannustanut Green Know-How Turku, Hirvensalon kaavoituksen tulevaisuutta valottanut ICTULA sekä kansainvälinen sähköautoprojekti EVD-POST. Kaikki viisi projektia on toteutettu yhteistyönä, ja osallistujina niissä on ollut ympäristönsuojelutoimiston lisäksi niin Turun alueen kuntia, yrityksiä kuin eurooppalaisia kaupunkejakin. Tutkielmassa arvioin projektien yhteiskunnallista vaikuttavuutta julkishallinnollisesta näkökulmasta. Tässä tapauksessa yhteiskunnallinen vaikuttavuus merkitsee muun muassa sitä, miten ympäristönsuojelutoimisto on vastannut sille asetettuihin tavoitteisiin ja miten toiminta on vastannut siihen kohdistuvia yhteiskunnallisia tarpeita. Tutkimukseni perusteella tarpeet ovat muodostuneet 1990-luvun Suomen talouslaman, 1980- ja 1990-lukujen globaalin ja EU:n ympäristöpolitiikan sekä 1990-luvun kaupunkistrategioiden ja ympäristönsuojeluohjelman kautta. Projektien arviointiin hyödynnän tavoitelähtöistä metodia Evert Vedungin Public Policy and Program Evaluation sekä Huey-Tsyh Chenin Theory-Driven Evaluations -teoksia. Metodilla tarkennan tavoitteiden, toimenpiteiden ja lopputulemien suhdetta. Sen lisäksi käytän Ray Pawsonin ja Nick Tilleyn Realistic Evaluation -kirjan realistista arviointitapaa, jolla tutkin kontekstin ja tehtyjen toimenpiteiden vaikutusta projekteissa. Projektien arvioinnin jälkeen kokoan yhteen päätelmiä projektien yhteiskunnallisesta vaikuttavuudesta ja pohdin syitä siihen, miksi projektit eroavat vaikuttavuudeltaan. Tutkielman johtopäätöksinä on, että projektit eroavat yhteiskunnalliselta vaikuttavuudeltaan lähtökohtien ja hyväksyttävyyden johdosta esimerkiksi lainsäädännön ja ympäristöpolitiikan vuoksi. Kyse on osaksi myös siitä, että joissain projekteissa tavoitteet on asetettu epärealistisiksi suhteessa niiden toteutumiseen. Projekteihin kohdistuvat ulkoiset tarpeet, toimintaympäristö ja realistiset tavoitteet eivät kuitenkaan ehdottomasti takaa yhteiskunnallista vaikuttavuutta. Myös yhteistyöprojektien toteuttajien ominaisuudet eli sisäiset tekijät vaikuttavat yhteiskunnallisen vaikuttavuuden ilmenemiseen.
Resumo:
Kastelu on merkittävästi lapsen arkielämää haittaava kiusallinen oire. Koulun aloittavista perusterveistä lapsista 10 – 25 % kastelee viikoittain joko päivällä ja/tai yöllä. Keskeistä kastelevan lapsen hoidossa on kastelua vähentävien ja virtsarakon hallintaa lisäävien tapa-asioiden ohjaus ja uusien toimintamallien vakiinnuttaminen lapsen arkeen. International Children’s Continence Societyn (ICCS) suositusten mukaan arjen tapa-asioiden ohjaukseen perustuvan uroterapian tulisi olla kastelevan lapsen ensisijainen hoitomuoto. Tutkimuksen tarkoituksena oli arvioida pissakoulu-intervention vaikuttavuutta kastelun hoidossa sekä kuvata lasten kokemuksia pissakoulusta. Tutkimusasetelmassa käytettiin toisiaan täydentävinä sekä kvantatiivisia että kvalitatiivisia aineistonkeruumenetelmiä. Kuusikymmentäyhdeksän hoitoresistentiksi kastelijaksi luokiteltua 6-12-vuotiasta lasta osallistui polikliiniseen pissakouluun 4-6 lapsen ryhmissä kahtena erillisenä päivänä kahden kuukauden välein. Otoskooksi määriteltiin voima-analyysin perusteella 52. Ohjauksen sisältö perustui ICCS:n suosituksiin ja toteutuksessa painotettiin lapsilähtöisyyttä sekä yhdessä tekemistä ja keskustelua. Kvantitatiivisen osan aineistonkeruumenetelmänä käytettiin viikon WC-päiväkirjaa. Kastelun määrän muutoksia mitattiin ennen ja jälkeen molempien pissakoulupäivien ja tulokset analysoitiin SPSS tilasto-ohjelmalla. Kvalitatiivinen aineisto kerättiin pissakoulun toisen päivän päätteeksi haastattelemalla viisi ensimmäistä pissakouluryhmää, jonka jälkeen aineiston todettiin saturoituneen. Ryhmäkeskustelut analysoitiin aineistolähtöisellä sisällönanalyysillä. Tutkimukseen osallistuneista 69 lapsesta 58:lta saatiin tiedot kaikilta neljältä mittauskerralta. Lapset olivat iältään keskimäärin 8,3 vuotiaita, 34 oli tyttöä ja 24 poikaa. Verrattaessa ensimmäisen ja viimeisen mittauksen keskiarvojen välisiä eroja kuivat päivät (3,5 vrt. 5,3, p<0.001) ja kuivat yöt (2,4 vrt. 3,9, p<0.001) lisääntyivät tilastollisesti merkitsevästi. Päiväkastelun osalta 24/40 (60 %) ja yökastelun osalta 23/46 (50 %) lapsella kastelu väheni ≥50 %. Kuivaksi tuli 13/58 (22 %) lasta. Ryhmähaastatteluihin osallistui 19 lasta (12 tyttöä ja 7 poikaa, keski-ikä 8,9 vuotta). Lapset kokivat kastelun monella tapaa arkea haittaavaksi noloksi pulmaksi. Pissakoulu auttoi heitä tulemaan pissarakon pomoksi, jolloin pulmasta tuli hallittava tai siitä pääsi kokonaan eroon. Erityisen tärkeää lapsille oli tavata toisia kastelevia lapsia ja jakaa kokemuksia heidän kanssaan sekä oppia tekemällä lapsilähtöisin menetelmin. Pissakoulu on lapsilähtöinen ja vaikuttava hoitotyön interventio, joka arjen tapa-asioiden muutoksilla auttaa lapsia saavuttamaan paremman virtsarakon hallinnan ja vähentämään kastelua tarjoten myös arvokasta vertaistukea.
Resumo:
Sähköiset palvelut ovat tulleet keskeiseksi osaksi Lappeenrannan seudun opiskelija-asuntosäätiön (LOAS) sisäistä ja ulkoista tiedottamista. Tiedon nopea saatavuus ja yksinkertainen käytettävyys ovat avainasemassa kehitettäessä uusia järjestelmiä. Uuden sukupolven käyttäjät ovat tottuneet tiedon saatavuuden helppouteen, joten tiedon tulee olla selkeästi esillä ja siihen on päästävä käsiksi nopeasti. Diplomityön tavoitteena oli tutkia ja kehittää LOAS:n sisäisiä ja ulospäin asiakkaille tarjottavia sähköisiä palveluita. Kehitettävät palvelut olivat intranet, Internet-sivut ja Maestro Opas-asiakashallinta. LOAS:n palvelut on hajautettu usean eri ohjelman välille, joten se aiheuttaa ongelmia informaation siirrossa järjestelmien välillä. Työssä sähköisten palveluiden käytettävyyttä parannettiin lyhentämällä polkuja ja koostamalla palveluita kokonaisuuksiksi. Työn lopputuloksena LOAS:llä on käytössään yksinkertaisemmat Internet-sivut ja selkeämpi intranet-näkymä. Palveluiden käytettävyyden ja vaikuttavuuden arviointi suoritettiin itsenäisenä perehtymisenä ongelmakohtiin ja henkilöhaastatteluina. Haastatteluilla kartoitettiin käyttäjien palvelun tarpeita, jonka avulla kehitettävät kohteet pystyttiin määrittelemään. Palveluiden käytettävyyttä parantamalla asukkaita pyritään ohjaamaan tarjottavien palveluiden piiriin. Tällöin asukkaille tarjottavien palveluiden laatua pystytään parantamaan. LOAS:n tulisi kuitenkin tarkastella erilaisia ratkaisuja toimintojen yhdistämiseen. Tämän avulla asukkaiden kaikki liikkuminen pystyttäisiin käsittelemään yhden ohjelman avulla.
Resumo:
Informaatio-operaatiot ovat nousseet viestintäteknologian kehityksen kautta sotilaallisen kiinnostuksen keskiöön. Informaatio-operaatioiden kattokäsitteen alle kuuluu myös psykologinen vaikuttaminen. Kuten muissakin sotilaallisen toiminnan funktioissa, myös psykologisessa vaikuttamisessa tehtyjen toimenpiteiden vaikutuksen mittaaminen ja arviointi nähdään yhä tärkeämpänä. Tässä tutkimuksessa psykologista vaikuttamista tarkastellaan viestinnän näkökulmasta. Viestinnän tavoitteena on tyypillisesti pyrkiä vaikuttamaan viestin vastaanottajan ajatuksiin, asenteisiin, käsitykseen ja toimintaan. Tutkimuksen tavoitteena oli tuottaa konkreettisia havaintoja ja niistä johdettuja keinoja psykologisen vaikuttamisen vaikuttavuuden arvioimiseksi. Siten tutkimuksen tutkimusongelmaksi muodostui: ”Miten psykologisen vaikuttamisen vaikuttavuutta voidaan arvioida”. Tutkija lähestyi ongelmaa laadullisen tutkimusstrategian kautta. Keskeisimmän tutkimusongelman ratkaisuna oletettiin olevan viestinnälliset käytännöt. Toisin sanoen, vaikuttavuuden arvioinnin oletettiin olevan sidoksissa psykologisen vaikuttamisen viestinnällisiin valintoihin. Tutkimus toteutettiin teoriaohjaavasti. Ensimmäisessä vaiheessa tutkittu aineisto käsitteli psykologisia operaatioita toisen maailmansodan loppuvuosilta tähän päivään. Lopulta tutkimusraporttiin päätyi kaksi näytettä, joiden avulla yhtäältä tutkittiin vaikuttamisen viestinnällisiä lähtökohtia ja toisaalta pyrittiin havainnoimaan vaikuttavuuden arviointiin liittyviä tekijöitä. Tutkimuksen keskeisimpinä tuloksina voidaan pitää sitä, että vaikuttavuuden arviointi voidaan jakaa suoriin, epäsuoriin ja monimenetelmäisiin arvioinnin lähestymistapoihin. Toisena keskeisenä tuloksena voidaan mainita, että vaikuttajan valitsema viestinnällinen lähestymistapa on sidoksissa vaikuttavuuden arviointiin. Psykologiseen vaikuttamiseen tähtäävän viestinnän rakentaminen kaksisuuntaisen viestintäkäsityksen mukaiseksi näyttäisi mahdollistavan useampien viestinnän areenoiden muodostumisen. Tutkimuksen keskeisenä johtopäätöksenä voidaan pitää sitä, että viestinnän rakentaminen kaksisuuntaisen periaatteen mukaiseksi tuottaa useampia sellaisia vuorovaikutuksen areenoita, joiden sisällä voidaan hyödyntää monimenetelmäisiä vaikuttavuuden arvioinnin keinoja. Monimenetelmäisen tiedonkeruun ja analysoinnin voidaan olettaa antavan entistä tarkempaa tietoa kohdesysteemin asenteiden, arvojen ja toiminnan muutoksesta.
Resumo:
Rajavartiolaitoksen tuloksellisuutta ja sen kehittymistä koko organisaation osalta on edellisen kerran tarkasteltu vuonna 2002, jolloin tarkasteltava ajanjakso oli vuosien 1995–2001 välinen aika. Tämän tarkastelun jälkeen rajavartiolaitoksen tuloksellisuuden laskentajärjestelmän (RATU) laskentasäännöt tarkastettiin ja tällä hetkellä voimassa olevan laskentajärjestelmä on ollut käytössä sellaisenaan vuodesta 2002 lähtien. Tässä työssä tarkasteltiin Suomenlahden merivartioston toiminnallisen tuloksellisuuden kehitystä vuosien 2002–2005 välisenä aikana voimassa olevan RATU:n teoriapohjalta sekä pyrittiin löytämään mahdollisia kehittämisehdotuksia voimassa olevaan laskentajärjestelmään. Työn pääkysymys oli: - Antaako rajavartiolaitoksen tuloksellisuuden laskentajärjestelmä riittävät ja oikeat tiedot Suomenlahden merivartioston toiminnallisesta tuloksellisuudesta? Pääkysymykseen haettiin vastausta seuraavien alakysymysten avulla: - Miten Suomenlahden merivartioston tuloksellisuus on kehittynyt vuosina 2002–2005? - Mitkä tekijät ovat vaikuttaneet tuloksellisuuden kehittymiseen? Työssä pyrittiin selvittämään, vastaako RATU:n toiminnallisen tuloksellisuuden laskenta valtionhallinnon nykyisen toiminnallisen tuloksellisuuden laskennan vaatimuksia eli mittaako tuloksellisuuden laskentajärjestelmä oikeita asioita ja onko mittareiden herkkyydet ja painotussuhteet oikein määritelty? Työ rajattiin käsittelemään Suomenlahden merivartioston operatiivisen näkökulman toiminnallista tuloksellisuutta jättäen työn ulkopuolelle tekninen – ja henkilöstönäkökulma, kannattavuus sekä yhteiskunnallisen vaikuttavuuden arviointi. Työ oli kvalitatiivinen tutkimus, jossa yhtenä aineistonkeruumenetelmänä käytettiin asiantuntijahaastatteluja. Työtä varten haastateltiin seitsemää eri asiantuntijaa Suomenlahden merivartiostosta. Tärkein tutkimusmateriaalin lähde oli kuitenkin rajavartiolaitoksen johdon tietojärjestelmä (RJT), josta saatiin tarkasteltavan ajanjakson tulos – ja panostiedot. Sen tukena tutkimuksessa käytettiin hyväksi vuotuisia toimintakertomuksia. Kerättyjen dokumenttien ja haastattelujen analysoinnissa käytettiin hyväksi sisällönanalyysia, jonka avulla kerätty materiaali kyettiin järjestämään tiiviiseen ja selkeään muotoon kadottamatta kuitenkaan sen sisältämää informaatiota. Tutkimuksessa havaittiin, että tuloksellisuuden laskentajärjestelmän perusperiaatteita ei tunneta kovinkaan hyvin Suomenlahden merivartioston eri johtoportaissa. Järjestelmässä on ollut ongelmia ja vartioston eri toimipisteet ovat joutuneet pitämään rinnakkaisia seurantatilastoja, mutta tiedonsiirto-ongelmat on pyritty ratkaisemaan vuoden 2007 alussa. Tutkimuksessa todettiin, että Suomenlahden merivartioston tuloksellisuutta laskettaessa tulisi huomioida vain hallintoyksikön omasta toiminnasta riippuvat tapahtumat ja suoritteet. Näin asia ei ole kuitenkaan ollut tarkasteltava ajanjaksona. Tämän lisäksi työssä ehdotettiin meripelastus – tulosalueella suorituskyky- ja saatavuustunnuslukujen painoarvojen lisäämistä jättämällä henkilöiden suorittamat arvioinnit pienemmälle painoarvolle. Kokonaisuutena voidaan kuitenkin todeta, että tuloksellisuuden laskentajärjestelmä Suomenlahden merivartioston osalta on pääsääntöisesti onnistuneesti rakennettu ja sen avulla kyetään osoittamaan tilivelvollisuuden toteutuminen. Rajavartiolaitosta voidaankin pitää yhtenä tuloksellisuuden mittaamisen edelläkävijänä Suomessa, koska perusperiaatteet tähän järjestelmään on luotu jo 1990-luvun alkupuolella ja vielä 2000-luvulla laskentajärjestelmä vastaa valtionhallinnon asettamiin tiukentuneihin vaatimuksiin tuloksellisuuden määrittämisestä.
Resumo:
Esitys vaikuttavuuden arviointi -ryhmässä 13.2.2012.
Resumo:
Markku Laitisen esitys Vaikuttavuuden arvo -seminaarissa Helsingissä 29.10.2014.
Resumo:
Sami Serolan esitys Vaikuttavuuden arvo -seminaarissa Helsingissä 29.10.2014.
Resumo:
This study investigates societal effectiveness of transport sector’s Research & Development (R&D) operations. In this study effectiveness refers to organization’s capability to produce the intended and desired impacts through its operations. The aim of this study is to identify the motives for evaluating societal effectiveness and recognize the critical success factors for improving effectiveness. The theoretical framework focuses first in the policy context of effectiveness evaluation in public sector and secondly the framework introduces the concept and process of effectiveness evaluation. The empirical part is carried out as a case study, which investigates societal effectiveness of Finnish Transport Agency’s (FTA’s) R&D. The aim is to recognize FTA’s critical success factors for improving R&D operations’ societal effectiveness. Based on these factors, the organization is able to define indicators for measuring effectiveness in the future operations. In this study societal effectiveness is investigated from R&D purchasers’ and R&D end- users’ points of views according to Purchaser-Provider-model. The results indicate that societal effectiveness evaluation is important part of R&D operations, but the implementation of the evaluation as part of daily operations is challenging. Because of limited resources, the organization is forced to strong priorization and therefore R&D tasks are secondary after the operational tasks. Based on the results the critical success factors can be recognized as resources and priorization, clear strategy and objectives, internal communications, cooperation between public and private sector and R&D implementation and dissemination.