Big Data NoSQL-järjestelmissä

Relaatiotietokannat ovat olleet vallitseva suunta suurissa tietokantajärjestelmissä jo 80-luvulta lähtien. Viimeisen vuosikymmenen aikana lähes kaikki teollinen ja henkilökohtainen tiedonvaihto on siirtynyt sähköiseen maailmaan. Tämä on aiheuttanut valtaisan kasvun datamäärissä. Sama kasvu jatkuu edelleen eksponentiaalisesti. Samalla ei-relaatiotietokannat eli NoSQL-tietokannat ovat nousseet huomattavaan asemaan. Monet organisaatiot käsittelevät suuria määriä järjestämätöntä dataa, jolloin perinteisen relaatiotietokannan käyttö yksin ei välttämättä ole paras, tai edes riittävä vaihtoehto. Web 2.0 -termin takana oleva internet-kulttuurin muutos tukee mukautuvampia ja skaalautuvia NoSQL-järjestelmiä. Internetin käyttäjät, erityisesti sosiaalisessa mediassa tuottavat valtavia määriä järjestymätöntä dataa. Kerättävä tieto ei ole enää tietyn mallin mukaan muotoiltua, vaan yksittäiseen tietueeseen saattaa liittyä esimerkiksi kuvia, videoita, viittauksia muiden käyttäjien luomiin instansseihin tai osoitetietoja. Tässä tutkielmassa käsitellään NoSQL-järjestelmien rakennetta sekä asemaa erityisesti suurissa tietojärjestelmissä ja vertaillaan niiden hyötyjä ja haittoja relaatiotietokantojen suhteen.

On-Line Analytical Processing of Inventory Turnover

Operatiivisen tiedon tuottaminen loppukäyttäjille analyyttistä tarkastelua silmällä pitäen aiheuttaa ongelmia useille yrityksille. Diplomityö pyrkii ratkaisemaan ko. ongelman Teleste Oyj:ssä. Työ on jaettu kolmeen pääkappaleeseen. Kappale 2 selkiyttää On-Line Analytical Processing (OLAP)- käsitteen. Kappale 3 esittelee muutamia OLAP-tuotteiden valmistajia ja heidän arkkitehtuurejaan sekä tyypillisten sovellusalueiden lisäksi huomioon otettavia asioita OLAP käyttöönoton yhteydessä. Kappale 4, tuo esille varsinaisen ratkaisun. Teknisellä arkkitehtuurilla on merkittävä asema ratkaisun rakenteen kannalta. Tässä on sovellettu Microsoft:n tietovarasto kehysrakennetta. Kappaleen 4 edetessä, tapahtumakäsittelytieto muutetaan informaatioksi ja edelleen loppukäyttäjien tiedoksi. Loppukäyttäjät varustetaan tehokkaalla ja tosiaikaisella analysointityökalulla moniulotteisessa ympäristössä. Vaikka kiertonopeus otetaan työssä sovellusesimerkiksi, työ ei pyri löytämään optimaalista tasoa Telesten varastoille. Siitä huolimatta eräitä parannusehdotuksia mainitaan.

DW-kannan kehittäminen myynnin ja logistiikan järjestelmässä

Viimeisten vuosien aikana eri yritysten ja organisaatioiden tietokantoihin talletetun tie-don määrä on kasvanut lähes eksponentiaalisesti. Sen seurauksena perusjärjestelmät eivät ole enää pystyneet tuottamaan halutunlaisia analysointi- ja raportointipalveluja, mistä on syntynyt tarve tietokannoille, jotka hoitavat suurimittaisen tiedon varastoinnin perusjärjestelmistä eriytettyinä. Näistä mahdollisesti lukuisista perusjärjestelmistä tieto siirretään keskitettyyn tietokantaan, eli tietovarastoon (Data Warehouse, DW). Tässä työssä on tutkittu DW-kantoja, ja niihin liittyviä siirto-, päivitys- ja analysointityökalu-ja. Erityistä huomiota on kiinnitetty niiden soveltumiseen Stora Enson Fenix-järjestelmään, ja vanhojen omatekoisten järjestelmien korvaamiseen valmisratkaisuilla.

Business intelligence –järjestelmä integraation tukena kansainvälisessä yrityksessä

Business intelligencellä tarkoitetaan liiketoimintatiedon hallintaan liittyviä prosesseja ja tekniikoita. Se pitää sisällään tiedon keräämiseen, tallentamiseen, analysointiin ja jakamiseen käytettyt tuotteet, tekniikat ja prosessit, joiden tavoitteena on auttaa yrityksen työntekijöitä liiketoimintaan liittyvässä päätöksenteossa. Tutkimuksen tavoitteena on tutkia uuden yritysryhmän laajuisen BI-tietojärjestelmän suunnitteluun ja käyttöönotoon liittyviä seikkoja ja luoda valmiudet BI-tietojärjestelmän kehitys- ja käyttöönottoprojektin kohdeyrityksessä, jonka toimiala on kansainvälinen terveydenhoitoalan tukkuliiketoiminta. Uuden BI-järjestelmän halutaan tukeva yritysryhmän yritysten välistä integraatiota ja tehostavan tiedonhakuun ja analysointiin liittyviä prosesseja. Tutkimus toteutettiin konstruktiivisena tutkimuksena, joka kattaa kohdeyrityksen IT-arkkitehtuurin, tietosisällön, prosessit ja organisaation raportoinnin kannalta. Lisäksi työssä suoritettiin ohjelmistovertailu kahden markkinoilla toimivan merkittävän ohjelmistotalon BI-tuotteiden välillä. Työssä havaittiin, että BI-projekti on laaja-alainen ja suuri hanke, joka ulottuu läpi koko organisaation. BI-ohjelmiston tehokas hyödyntäminen asettaa vaatimuksia erityisesti taustajärjestelmien tiedon huolelliseen mallintamiseen liittyen. Työssä saatiin pilotoinnin kautta käytännön kokemuksia uudesta järjestelmästä ja sen tarjoamista mahdollisuuksista kohdeyrityksessä.

Tietovaraston uudelleensuunnittelu ja toteuttaminen

Tietovarastointi on yleistynyt yritysten raportoinnin tietolähteenä. Tietovarastojen avulla voidaan kehittää monipuolisia raportointiratkaisuja. Datamäärän ja käyttäjämäärän kasvu sekä raporttien monipuolistuminen aiheuttavat suorituskykyhaasteita. Tässä työssä käydään läpi tietovaraston uudelleensuunnittelu suorituskykyhaasteisiin keskittyen. Työn tavoitteena oli sekä tietovaraston käytön että ylläpidon tehostaminen. Työvaiheina olivat arkkitehtuurin kehittäminen, faktan ja dimensioiden optimointi, ETL-prosessin tehostaminen, paikallisvarastojen rakentaminen sekä osioinnin, indeksien ja aggregaatiosummien tehokkaampi hyödyntäminen. Tavoitteen toteutumista mitattiin toistamalla työn eri vaiheissa suorituskykytestejä. Tuloksena saavutettiin merkittävä suorituskyvyn parantuminen erityisesti työn aikana luoduissa paikallisvarastoissa. Tietovarastoon tehtävien kyselyiden ja hallintatoimenpiteiden kesto pieneni yleisesti noin kolmannekseen. Erillisiin käyttötarkoituksiin räätälöityihin paikallisvarastoihin tehtävien kyselyjen kesto pieneni noin kymmenykseen tai parhaassa tapauksessa jopa sadasosaan

Meripelastustoimen raportointijärjestelmän kehittäminen teknisestä näkökulmasta

Tämän tutkielman tarkoituksena on ollut tutkia, miten meripelastustoimen raportointijärjestelmää on kehitettävä tiedon analysoinnin parantamiseksi. Päätutkimuskysymykseen vastataan alatutkimuskysymyksillä, mitä tietoja Rajavartiolaitos voi lainsäädännön perusteella tallentaa meripelastusrekisteriin, miten meripelastustoimen raportointi on toteutettu tällä hetkellä, millainen uusi tietomalli tukee meripelastustoimen raportointia sekä mitä teknisiä ratkaisuja Rajavartiolaitoksessa voidaan käyttää apuna meripelastustoimen raportoinnin analysoinnin kehittämisessä. Tutkielmassa käytetty tutkimusstrategia on kvalitatiivinen tapaustutkimus. Tutkimusmenetelminä on käytetty kvalitatiivista sisällönanalyysiä, teemahaastatteluja sekä UML-tietomalleja. Tutkielman johtopäätöksenä selvisi, että nykyisessä raportointijärjestelmässä ei ole vakavia puutteita. Nykyinen järjestelmä ei kuitenkaan tue teknistä tietämyksen hallintaa, eikä nykyisen toimintatavan kehittämisellä voida oleellisesti parantaa tiedon analysointimahdollisuuksia. Tutkielman tulosten perusteella esitetään tiedon louhinta- ja OLAP-tekniikoiden käyttömahdollisuuksien selvittämistä kehitettäessä meripelastustoimen tuottaman tiedon analysointia. Lisäksi esitetään kansallisen ja kansainvälisen viranomaisyhteistyön kehittämistä tietojen vaihdon ja analysoinnin osalta osana kokonaisvaltaista vesiliikenneturvallisuuden parantamista.

Data management as a part of performance management: Case study about production reporting development project

Because of the increased availability of different kind of business intelligence technologies and tools it can be easy to fall in illusion that new technologies will automatically solve the problems of data management and reporting of the company. The management is not only about management of technology but also the management of processes and people. This thesis is focusing more into traditional data management and performance management of production processes which both can be seen as a requirement for long lasting development. Also some of the operative BI solutions are considered in the ideal state of reporting system. The objectives of this study are to examine what requirements effective performance management of production processes have for data management and reporting of the company and to see how they are effecting on the efficiency of it. The research is executed as a theoretical literary research about the subjects and as a qualitative case study about reporting development project of Finnsugar Ltd. The case study is examined through theoretical frameworks and by the active participant observation. To get a better picture about the ideal state of reporting system simple investment calculations are performed. According to the results of the research, requirements for effective performance management of production processes are automation in the collection of data, integration of operative databases, usage of efficient data management technologies like ETL (Extract, Transform, Load) processes, data warehouse (DW) and Online Analytical Processing (OLAP) and efficient management of processes, data and roles.