Kirjaston toiminnan vaikuttavuuden ja arvon mittaaminen: espanjalaisia kokemuksia ja tuloksia

Jarmo Saartin esitys Vaikuttavuuden arvo -seminaarissa Helsingissä 29.10.2014.

Psykologinen vaikuttaminen : vaikuttavuuden arvioinnin viestinnällinen tarkastelu

Informaatio-operaatiot ovat nousseet viestintäteknologian kehityksen kautta sotilaallisen kiinnostuksen keskiöön. Informaatio-operaatioiden kattokäsitteen alle kuuluu myös psykologinen vaikuttaminen. Kuten muissakin sotilaallisen toiminnan funktioissa, myös psykologisessa vaikuttamisessa tehtyjen toimenpiteiden vaikutuksen mittaaminen ja arviointi nähdään yhä tärkeämpänä. Tässä tutkimuksessa psykologista vaikuttamista tarkastellaan viestinnän näkökulmasta. Viestinnän tavoitteena on tyypillisesti pyrkiä vaikuttamaan viestin vastaanottajan ajatuksiin, asenteisiin, käsitykseen ja toimintaan. Tutkimuksen tavoitteena oli tuottaa konkreettisia havaintoja ja niistä johdettuja keinoja psykologisen vaikuttamisen vaikuttavuuden arvioimiseksi. Siten tutkimuksen tutkimusongelmaksi muodostui: ”Miten psykologisen vaikuttamisen vaikuttavuutta voidaan arvioida”. Tutkija lähestyi ongelmaa laadullisen tutkimusstrategian kautta. Keskeisimmän tutkimusongelman ratkaisuna oletettiin olevan viestinnälliset käytännöt. Toisin sanoen, vaikuttavuuden arvioinnin oletettiin olevan sidoksissa psykologisen vaikuttamisen viestinnällisiin valintoihin. Tutkimus toteutettiin teoriaohjaavasti. Ensimmäisessä vaiheessa tutkittu aineisto käsitteli psykologisia operaatioita toisen maailmansodan loppuvuosilta tähän päivään. Lopulta tutkimusraporttiin päätyi kaksi näytettä, joiden avulla yhtäältä tutkittiin vaikuttamisen viestinnällisiä lähtökohtia ja toisaalta pyrittiin havainnoimaan vaikuttavuuden arviointiin liittyviä tekijöitä. Tutkimuksen keskeisimpinä tuloksina voidaan pitää sitä, että vaikuttavuuden arviointi voidaan jakaa suoriin, epäsuoriin ja monimenetelmäisiin arvioinnin lähestymistapoihin. Toisena keskeisenä tuloksena voidaan mainita, että vaikuttajan valitsema viestinnällinen lähestymistapa on sidoksissa vaikuttavuuden arviointiin. Psykologiseen vaikuttamiseen tähtäävän viestinnän rakentaminen kaksisuuntaisen viestintäkäsityksen mukaiseksi näyttäisi mahdollistavan useampien viestinnän areenoiden muodostumisen. Tutkimuksen keskeisenä johtopäätöksenä voidaan pitää sitä, että viestinnän rakentaminen kaksisuuntaisen periaatteen mukaiseksi tuottaa useampia sellaisia vuorovaikutuksen areenoita, joiden sisällä voidaan hyödyntää monimenetelmäisiä vaikuttavuuden arvioinnin keinoja. Monimenetelmäisen tiedonkeruun ja analysoinnin voidaan olettaa antavan entistä tarkempaa tietoa kohdesysteemin asenteiden, arvojen ja toiminnan muutoksesta.

Indikaattorin vaikutus tuloksellisuusrahoitukseen : TKI-toiminnan vaikuttavuuden mittaamisen haasteita ammattikorkeakouluissa

Ammattikorkeakoulujen tuloksellisuuden mittaamisen ja toimivan mallin kehittämiseen tuloksellisuuden vertailuun ammattikorkeakoulujen välillä on tehty paljon työtä erityisesti ammattikorkeakoulujen yhteisissä kehittämishankkeissa, opetus- ja kulttuuriministeriössä sekä ammattikorkeakouluissa. Tuloksellisuuden mittaaminen liittyy myös ammattikorkeakoulujen toimintaympäristöjen menestykseen, koska tulos vaikuttaa ammattikorkeakoulun kokonaisrahoitukseen ja sitä myötä opetuksen ja tutkimus-, kehittämis- ja innovaatiotoiminnan (TKI-toiminta) mahdollisuuksiin. TKI-toiminta muodostaa 15 % ammattikorkeakoulujen kokonaisrahoituksesta. Tämän laadullisen tapaustutkimuksen kohteena on tuloksellisuusmittari, joka kuvaa hakemuspohjaisen, ulkopuolisen rahoituksen volyymia ammattikorkeakoulun TKItoiminnassa ja jonka osuus ammattikorkeakoulun kokonaisrahoituksesta on 8 %. Työssä tutkittiin hakemuspohjaisen rahoituksen taustalla vaikuttavia tekijöitä tuloksellisuuden ja vaikuttavuuden mittaamisen haasteina. Hakemuspohjaisen rahoituksen kokonaisuus koostuu eri rahoittajien erilaisille kohteille ja eripituisille toteutuksille ajoittuvista hankkeista ja projekteista. Tutkimuksen aineistona olivat aiheesta tehdyt tutkimukset, raportit, selvitykset ja asiantuntijoiden kannanotot sekä tutkijan havainnot TKI-toiminnan työtehtävissä vuosina 1997 – 2012. Tutkimusmenetelmänä oli aineistolähtöinen tutkimus ja tutkimuksen tuloksena esitettiin 84 tuloksellisuusmittarin taustalla vaikuttavaa tekijää. Ensimmäisenä johtopäätöksenä tuloksellisuusmittarin taustatekijöiden analyysistä esitettiin, että taustatekijöiden vaikutus vaihtelee ammattikorkeakouluittain ja taustatekijät vaikuttavat tuloksellisuusrahoituksen indikaattoriin. Toisena johtopäätöksenä esitettiin, että ammattikorkeakoulujen TKI-toiminnan tuloksellisuuden vertailuun on mahdollista tuoda alueellista näkökulmaa.

Asiakaslähtöisyyden mittaaminen hoitotyössä

Opinnäytetyön tarkoituksena oli kartoittaa ja analysoida millaisilla mittareilla asiakaslähtöistä hoitotyötä on mitattu ja millaisia tuloksia mittareilla asiakaslähtöisyydestä on saatu. Opinnäytetyö on osa kansainvälistä StaLT -hanketta, jonka tarkoituksena on kehittää hoidon laatua Länsi-Tallinnan keskussairaalassa. Analysoitava aineisto on kerätty kirjallisuuskatsauksen avulla. Tarkasteluun valikoitui 13 hoitotieteellistä tutkimusta. Aineistomme koostui väitöskirjoista (n = 3), pro gradu -tutkielmista (n = 5), tutkimusartikkeleista (n = 4) sekä tutkimusraportista (n = 1). Aineisto analysoitiin kahdessa osassa tutkimuskysymyksiin perustuen. Deduktiivisella sisällön analyysilla tarkasteltiin asiakaslähtöisyyttä mittaavia mittareita luomamme analyysirungon pohjalta: tutkimuksen tarkoitus, tutkimuksen kohdejoukko, mittarin kehittämisen vaiheet ja mittarin rakenne. Mittareilla saatuja tuloksia tarkasteltiin Irma Kiikkalan esittämien asiakaslähtöisyyden ulottuvuuksien pohjalta luodulla analyysirungolla. Analyysirungon kategoriat olivat: toiminnan arvoperusta ja näkemys työtekijästä, näkemys asiakkaasta, näkemys hoito- ja palvelutoiminnan luonteesta sekä terveydenhuollon organisaation toiminta. Asiakaslähtöisyyttä voidaan mitata kvantitatiivisilla ja kvalitatiivisilla mittareilla. Asiakaslähtöisyyttä on aikaisemmissa tutkimuksissa tarkasteltu vaihtelevasti: mittarista riippuen eri asiakaslähtöisyyden ulottuvuudet painottuivat eri tavoin. Toiminnan arvoperusta ja näkemys työntekijästä nousivat esiin osana asiakaslähtöistä hoitotyötä kaikissa mittareissa. Useilla mittareilla mitattiin myös hoito- ja palvelutoiminnan luonnetta sekä terveydenhuollon organisaation antamia lähtökohtia asiakaslähtöiselle työskentelylle. Ulottuvuuksista vähiten painottui näkemys asiakkaasta, jonka ominaisuuksia mitattiin vain muutamassa mittarissa. Asiakaslähtöisyyttä on tutkittu monissa eri ympäristöissä, mutta jatkossa asiakaslähtöisyyttä voisi tutkia terveysasemien vastaanotolla ja päihdehuollossa sekä -psykiatriassa, joihin suunnattua mittaria ei analyysin perusteella ole kehitetty. Myöskään terveydenhuoltoalan opetuksessa ilmenevää asiakaslähtöisyyttä ei ole kattavasti tutkittu. Mielenkiintoisen näkökulman asiakaslähtöisyyden mittaamiseen toisi lisäksi hoitohenkilökunnan persoonallisuuden ja inhimillisten piirteiden vaikutus asiakaslähtöisyyden kokemiseen.

Ylläpitosuunnittelun laadun arviointi ja mittaaminen

Tässä diplomityössä tutkittiin suunnittelupalvelun laatuun vaikuttavia tekijöitä sekä etsittiin keinoja mitata suunnittelupalvelun laatua. Diplomityön lähtökohtana oli tilanne, jossa suunnittelutoimisto toimittaa ylläpitosuunnittelupalvelua paperi- ja metsäteollisuuden alan yritykselle. Työssä selvitettiin yleisesti, mistä suunnittelupalvelun laatu muodostuu. Tärkeä osa työtä oli tutkia kyselytutkimuksen avulla, onko tilaajalla ja toimittajalla samanlaiset näkemykset laadun osalta. Kyselyt suoritettiin sekä haastatteluin että kirjallisesti. Vastauksia saatiin kaikkiaan 45 kappaletta. Kohdejoukko oli tarkasti määritelty koostuen sekä tilaajan että toimittajan edustajista. Työssähavaittiin, että suunnittelupalvelun laatuun ja toimittajan valintaan vaikuttavat hyvin paljon itse suunnitelmien laadun lisäksi henkilökohtaiset kokemukset palvelusta. Pahimmiksi riskitekijöiksi ylläpitosuunnittelulle koettiin lähtötietoihin liittyvät ongelmat sekä aikataulujen pettäminen. Näiden lisäksi työssä tehtiin selvitys suunnittelupalvelun laadun mittaristosta, jonka oikealla käytöllä voitaisiin luoda ohjausvaikutus suunnittelupalveluprosessiin paremman laadun ja tehokkaamman toiminnan aikaansaamiseksi.

Yrityksen suorituskyvyn mittaaminen hävikin hallinnassa makeisteollisuudessa

Yritysten toimintaympäristössä on tapahtunut viime vuosina suuria muutoksia ja niitä tapahtuu tulevaisuudessakin yhä nopeammassa tahdissa. Yritysten on kehitettävä suorituskykyään, jotta sidosryhmien tarpeet kyetään tyydyttämään. Suorituskyvyn kehittäminen perustuu mittaustuloksiin ja niistä tehtäviin johtopäätöksiin. Hävikin mittaaminen ja analysointi on osa yrityksen suorituskykyä. Mittarit, joita käytetään suorituskyvyn mittaamiseen, tulee olla luotettavia. Mittaustuloksia tulee pystyä hyödyntämään tehokkaasti. Makeisteollisuudessa hävikkimärät ovat jatkuvasti kasvaneet. Tämä oli heräte tälle tutkimukselle yrittää löytää paras tapa mitata hävikkiä. Toinen tavoite oli selvittää, kuinka olisi mahdollista vähentää hävikin syntymistä. Näiden tavoitteiden saavuttaminen vaati selvitystä, kuinka hävikkiä mitataan tänä päivänä, mistä hävikki syntyy ja kuinka siihen reagoidaan. Tutkimuksessa mukana olevassa yrityksessä on laaja valikoima erilaisia makeistuotteita, sokerimakeisia ja suklaatuotteita. Tähän tutkimukseen valittiin saman tyyppiset valmistuslinjat jokaiselta tehtaalta. Näiltä linjoilta valittiin tutkittavaksi kaksi erilaista tuotetta. Tämän tutkimuksen tulos oli, että hävikkiä käsitellään jamitataan hyvin eri tavalla jokaisella tehtaalla. Hävikkiä mitataan juuri, kutenkirjallisuudessa on mainittu verraten myyntiin tai valmistettuihin kiloihin. Näin ollen ei ollut tarvetta muuttaa mittausmenetelmää, joka oli tutkimuksen päätavoite. Tärkeintä oli löytää kohdat, joissa hävikkiä syntyy. Ajan puutteen vuoksiei ollut mahdollista selvittää kaikkia hävikin syntyyn vaikuttavia syitä tai paikkoja, joissa hävikkiä syntyy. Suurin syy hävikkiin on huono laatu. Tähän syynäon osaamisen ja koulutuksen puute. Syynä hävikin syntyyn voi olla myös raaka-aineissa tai resepteissä. Tässä tutkimuksessa käytettiin Bill Crosbyn kirjaa 'Laatu on ilmaista'. Kirjassa käsitellään -14 kohdan ohjelmaa', joka voisi olla hyvä ohjelma nostaa tuotteiden laatutasoa myös tutkimuksessa mukana olevassa yrityksessä.On tärkeää tarkentaa säännöt, kuinka kirjataan hävikkiä, tarkistaa reseptit ja koulutuksen avulla nostaa osaamisen tasoa. Tällaiselle projektille täytyy olla koko organisaation ja ylimmän johdon tuki. Kaikki ne miljoonat eurot, jotka heitetään pois, voisivat olla tuloksessa. Se ei tapahdu yhdessä yössä, vaan vaatiijatkuvaa työtä tavoitteen saavuttamiseen.

Ydinvoimalaitoksen tuotannon ylläpitoprosessin suorituskyvyn mittaaminen

Kilpailun kiristyminen on pakottanut ydinvoimalaitoksia parantamaan tehokkuuttaan etsimällä uusia toimintatapoja. Heräte työn teettämiseen syntyi tutkimuksen case-kohteen Loviisan voimalaitoksen kiinnostuksesta Balanced Scorecard (BSC) -johtamisjärjestelmää,sen käyttöönoton mahdollisia vaikutuksia sekä BSC:n ja prosessiajattelun yhdistämistä kohtaan. Tutkimuksen tavoitteena on rakentaa Loviisan voima-laitoksen tuotannon ylläpitoprosessille BSC-mittaristo. Tämä edellyttää selvitystä siitä, mitä erityispiirteitä ydinvoimalaitoksiin liittyy strategisen suorituskyvyn mittaamisen kohteena. Lisäksi tavoitteena on selvittää, mikä tulisi prosessikohtaisten tuloskorttien rooli olla Loviisan voimalaitoksen BSC-järjestelmässä. Tavoitteenaon myös muodostaa suositus toimintamallista, jolla BSC voitaisiin ottaa käyttöön Loviisan voimalaitoksella, sekä selvittää, mitä vaikutuksia käyttöönotolla voiolla. Ydinvoimalaitoksen erityispiirteitä ovat muutokset toimintaympäristössä, viranomais-valvonta, toiminnan pitkäjänteisyys, laaja osaamis- ja tietotarve sekä turvallisuuden ja tiettyjen sidosryhmäsuhteiden merkityksen korostuminen. Johtuen erityispiirteistä Kaplanin ja Nortonin alkuperäistä asiakasnäkökulmaa muutetaan kattamaan sidosryhmät laajemmin. Tuotannon ylläpitoprosessin tuloskortissa vähiten painottuva näkö-kulma on henkilöstön ja uudistumisen näkökulma. Osa laitostason kriittisistä menestystekijöistä todetaan prosessin kannalta epäolennaisiksi. Prosessikohtaiset tuloskortit osoittautuvat vaikeasti hyödynnettäviksi linjaorganisaation ohjaamisessa. Strategiakartta todetaan hyväksi työvälineeksi BSC:nlaadinnassa. Toivasen projektimalli arvioidaan sopivaksi välineeksi mahdolliseen BSC:n käyttöönottoon Loviisan voimalaitoksella. Henkilöstön rooli ja erityispiirteiden vaikutukset tulee kuitenkin tarkistaa ennen mallin käyttöä. BSC-järjestelmän käyttöönoton arvioidaan selkeyttävän voimalaitoksen mittaristokokonaisuutta sekä parantavan syy-seuraussuhteiden hahmottamista ja alempien tasojen tavoitteiden kytkentää laitostason tavoitteisiin.

Pysäköintihallien pakokaasupäästöjen mittaaminen ja ilmanvaihdon ohj

Henkilöautojen pakokaasut sisältävät satoja eri yhdisteitä, joista monet ovat ihmisen terveydelle haitallisia. Pysäköintihallien ilmanlaatua on tähän asti mitattu pääasiassa hiilimonoksidiantureilla, jolloin ilmanvaihtokoneita on voitu käyttää tarvepohjaisesti. Parantunut pakokaasujen puhdistustekniikka on vähentänyt perinteisesti haitallisimmaksi koettujen hiilimonoksidin ja typenoksidien määräpakokaasuissa. Tästä johtuen hiilidioksidin määrä pysäköintihallissa voi kohota haitalliselle tasolle ennen kuin hiilimonoksidianturit reagoivat tilanteeseen. Tässä diplomityössä tarkasteltiin pysäköintihallien ilmanlaatua ja hiilidioksidiantureiden edellytyksiä toimia ilmanvaihdon ohjauksessa. Hiilimonoksidi- ja hiilidioksidipitoisuuksia mitattiin Kampin ja Koskikeskuksen pysäköintihalleissa. Tuloksissa esitetään hiilimonoksidin ja hiilidioksidin riippuvuus ilmanvaihdon tehosta ja pysäköintihallin liikenteen määrästä. Johtopäätöksissä on kuvattu ehdotus hiilidioksidiantureiden käytöstä pysäköintihallien ilmanvaihdon ohjauksessa.

Aineettoman pääoman mittaaminen ja tietämyksen hallinnan kehittäminen metsäteollisuusyrityksessä

Tieto on aina ollut yksi yrityksen tärkeimmistä resursseista, mutta vasta nyt siihen on alettu kiinnittää enemmän huomiota. Tiedonjohtaminen ja tietämyksen hallinta ovat haastavia ja osin hankaliakin toimintoja, koska on vaikeaa johtaa sellaista, mitä ei voi kuvata. Tietojohtamista voidaan kuitenkin ajatella prosessina, joka koostuu useammasta alaprosessista, kuten tiedon hankinta, tiedon luominen, tiedon varastointi, tiedon jakaminen ja tiedon soveltaminen. Kun ongelma-alue pilkotaan pienempiin kokonaisuuksiin, on siihen helpompi vaikuttaa. Tässä diplomityössä kehitettiin Stora Enso Publication Papers Oy Ltd Varkauden tehtaalle toimivia työkaluja/-menetelmiä tiedonjohtamisen ja tietämyksen hallinnan tueksi. Työssä luotiin yrityksen tarpeita vastaava mittaristomalli ja keskityttiin siinä erityisesti aineettomaan pääomaan liittyviin mittareihin. Jotta voidaan mitata jotain, on se ensin pystyttävä kuvaamaan. Siksi työssä käsiteltiin myös prosessijohtamista ja analysoitiin hieman yrityksen prosesseja sekä kehitettiin yritykselle uusi "tietojohtaminen" -prosessi. Mittariston ja prosessin luomisen lisäksi työssä esitettiin muutamia toimivia työkaluja/ menetelmiä tiedonjohtamisen ja tietämyksen hallinnan avuksi. Työn teoriaosuudessa tutustuttiin ensin prosessijohtamisen yleisimpiin teorioihin ja tarvittaviin käsitteisiin. Tämän jälkeen luotiin teoriapohja mittariston rakentamiseksi määrittelemällä käsitteet tieto ja aineeton pääoma sekä käsittelemällä muutamia mittaristomalleja, mittariston rakentamista ja aineettoman pääoman mittaamista. Tutkimuksen empiirisessä osassaanalysoitiin yrityksen johtamismalleja sekä määriteltiin prosessijohtamisessa käytetyt termit teorian pohjalta. Pääpaino työssä oli mittariston rakentamisessa ja tiedonjohtamisen sekä tietämyksen hallinnan tehostamisessa. Mittaristomalli luotiin useamman teorian pohjalta painottuen kuitenkinselvästi Balanced Scorecard -menetelmään. Työn tuloksena oli kattava mittaristomalli, aineettoman pääoman mittareita sekä uusia työkaluja/-menetelmiä tiedonjohtamiseen ja tietämyksen hallintaan.

Tietohallintoympäristön ylläpitopalveluiden laadun parantaminen ja suorituskyvyn mittaaminen

Suorituskyvyn mittaaminen korostuu yhä nopeammin muuttuvassa ja monimutkaisemmassa toimintaympäristössä. Taloudellisia mittareita laajempi suorituskyvyn mittaaminen mahdollistaa muutosten huomaamisen ja niihin reagoinnin aikaisemmin kuin pelkkä taloudellisten lukujen seuraaminen. Asiakkaiden vaatimuksien ja kilpailun kasvaessa tulee IT- yritysten pyrkiä yhä laadukkaampaan toimintaan pysyäkseen kilpailussa mukana. Tutkimuksen aiheena on rakentaa tasapainotettu mittaristo tietohallintoympäristön ylläpitopalveluille sekä esittää menetelmiä laadun parantamiseen. Palveluiden laadun parantamisen osalta käsitellään palvelun laadun ominaisuuksia, laadunhallintaa ja laadunhallintajärjestelmien käyttökokemuksia, kehitysmenetelmiä sekä laadun parantamisen vaikutuksia. Huomio kiinnittyi ennakoivaan laatutyöskentelyyn ja palvelun laadun ominaisuuksien monipuoliseen käsittelyyn. Palveluiden ollessa kyseessä painotus on toiminnanja suunnittelun laadussa. Suorituskyvyn mittaamisessa käsitellään suorituskyvynominaisuuksia, suorituskyvyn mittaamisen käyttöä, tasapainotettua mittaristoa ja mittariston rakentamista. Soveltavassa osiossa rakennetaan tasapainotettu mittaristo sekä esitetään menetelmiä palveluiden laadun parannukseen. Mittareiden valinnassa ja laadun kehittämisessä on käytetty hyväksi IT- yritysten viitekehyksiä ITILiä ja COBITia.

Aktiivihiilessä etenevän adsorptiorintaman mittaaminen puolijohdekaasuantureiden avulla

Tässä diplomityössä tutkitaan aktiivihiilielementissä etenevän kaasun adsorptiorintaman mittaamista puolijohdekaasuantureiden avulla. Työn teoriaosuudessa on tutustuttu aktiivihiilen suodattaviin ominaisuuksiin, valmistusprosessiin ja aktiivihiilen raaka-aineen valintaan. Teoreettisen tarkastelun perusteella työssä on laboratorio-olosuhteissa tutkittu lämmitettävien puolijohdekaasuanturien soveltuvuutta hiilessä etenevän adsorptiorintaman havaitsemiseen. Puolijohdekaasuantureille suoritetun herkkyystestauksen perusteella tutkittiin antureiden kykyä tunnistaa aktiivihiileen adsorboituneiden aineiden eteneminen hiilimateriaalissa. Suoritettujen mittausten perusteella todettiin puolijohdeantureiden soveltuvan hyvin aktiivihiilessä etenevän adsorptiorintaman havaitsemiseen. Antureiden selektiivisyydestä johtuen tutkittaessa useamman kaasun muodostaman adsorptiorintaman etenemistä hiilessä on käytettävä useita erityyppisiä puolijohdekaasuantureita.