Big data tietoisku julkishallinnolle 2.10.2013
- 2. Ohjelma 08:45-09:00 Aamukahvi 09:00-09:10 Mit辰 tarkoittaa big data? Immo Salo, Ivorio 09:10-09:30 Big data -selvityksen tulokset Markku Alanko, Ivorio 09:30-10:00 Mit辰 big data merkitsee julkishallinnolle? Markku Alanko, Ivorio 10:00-10:30 Tunnista, tallenna, jaa ja hy旦dynn辰 olennainen data Immo Salo, Ivorio 10:30-11:00 Kaksi tarinaa julkishallinnosta Petri Roine, SAS 11:00-11:30 yhteenveto ja keskustelua
- 3. Ivorion missio Ivorio on Suomen johtava riippumaton big data - asiantuntija. Autamme asiakkaamme valjastamaan tietojenk辰sittelyn mullistavan teknologian tukemaan strategiaa ja luomaan uutta liiketoimintaa.
- 4. Mit辰 tarkoittaa Big Data? Datan m辰辰r辰 ja laatu kasvaa kiihtyv辰ll辰 tahdilla maailmassa. Asialle tarvitsisi tehd辰 jotain.
- 5. Jokainen on kuullut big datasta Google-haun big data suosio
- 6. Big data p辰hkin辰nkuoressa Big data tarkoittaa kahta asiaa: 1. Havaintoa siit辰, ett辰 dataa on koko ajan m辰辰r辰llisesti enemm辰n ja sen muoto ja laatu vaihtelee suuresti 2. Ratkaisumalleja (tuotteet, palvelut, ohjelmistot, teknologiat), joilla tuohon haasteeseen tartutaan
- 7. Big datan 3 V:t辰 1. Volume Tietoa (dataa) on koko ajan enemm辰n. Se pit辰isi pysty辰 tallentamaan ja hy旦dynt辰m辰辰n. 2. Velocity Tietoa (dataa) tulee koko ajan nopeammin. P辰辰t旦ksi辰 pit辰isi pysty辰 tekem辰辰n nopeasti. 3. Variety Tietoa (dataa) tulee kiihtyv辰ll辰 tahdilla erilaisista l辰hteist辰, eik辰 se istu hyvin nykyisiin toimintamalleihin Veracity, Value Virality, Validity, Viscosity my旦s muita V-kirjaimia on lis辰tty kuvaamaan ilmi旦t辰.
- 8. Kuinka suuret ovat big data -markkinat? Yleisin luku on v辰lill辰 15-50 mrd IDC sanoo (12/2012), ett辰 vuonna 2016 markkinoiden koko on n. 26 mrd $ Gartner sanoo (10/2012), ett辰 vuonna 2012 big data - markkinat olivat n. 28 mrd $ Wikibon ennustaa (02/2012), ett辰 big data -markkinat ovat vuonna 2015 n. 54 mrd $ McKinseyn raportissa (05/2011) arvioitiin big datan vuotuisen lis辰arvo- ja kustannuss辰辰st旦potentiaalin olevan vuonna 2011 arviolta 1 000 mrd
- 9. Big data Suomessa Ivorio toteutti Liikenne- ja viestint辰ministeri旦lle selvityksen suomalaisesta big data -markkinasta. Mukana olivat julkishallinnon, yritysten, palveluntarjoajien ja oppilaitosten edustajat. http://www.lvm.fi/julkaisu/4156840/big-data- suomessa-keskustelualoite
- 10. Kysely: Vastanneista organisaatioista uskoi big datan olevan merkitt辰v辰ss辰 roolissa tietojenk辰sittelyn tulevaisuudessa. 95 %
- 11. Haaga-Helia ammattikorkeakoulu: Big datan merkitys kasvaa jatkuvasti koska yhteiskunta digitalisoituu jatkuvasti.
- 12. Accenture: R辰j辰hdysm辰isesti kasvavat tietom辰辰r辰t avaavat uusia mahdollisuuksia ja potentiaalisia kilpailuetuja monilla aloilla ja monissa yrityksiss辰.
- 13. Vastaajien n辰kemys Big datan merkitys 1. Lis辰辰 tehoa analysointiin 2. Mahdollisuus k辰sitell辰 suurempia datamassoja 3. Avaa ovia uusiin innovaatioihin Big data visio 1. Nousee liiketoiminnan ytimeen 2. Toimii moottorina uudelle liiketoiminnalle 3. Tehokkuus ja skaalautuvuus
- 14. McKinsey, 2011: By 2018, the United States alone could face a shortage of 140,000 to 190,000 people with deep analytical skills.
- 15. Gartner, 2012: By 2015, 4.4 million IT jobs globally will be created to support big data.
- 16. Forrester, 2012: IT still needs to support and certify data quality in the access and integration of data. It isnt a question of good enough data, it is about data quality efforts that matter to outcomes.
- 17. Big datan haasteet Osaajapula (teknologiat, datatieteilij辰t) L辰hdedatan vaihteleva laatu ja kasvava m辰辰r辰 Ilmi旦n ja teknologioiden j辰sentym辰tt旦myys %
- 18. Muutakin ratkaistavaa ... Yksityisyyden suojaaminen, lains辰辰d辰nt旦 Kalliit kehityskustannukset Ep辰kyps辰 ja hajanainen teknologiakirjo
- 19. Helsingin kaupungin tietokeskus: Suomi on tunnettu avoimuudestaan ja l辰pin辰kyvyydest辰辰n sek辰 erilaisista huippuosaajistaan, joten Suomella on paljon potentiaalia toimia eturintamassa sek辰 avoimen datan ett辰 big datan hy旦dynt辰misess辰.
- 20. Opetus- ja kulttuuriministeri旦: Huippuosaamisella on vaikutusta niin julkishallinnon sis辰iseen toiminnan tehokkuuteen ja l辰pin辰kyvyyteen kuin pysyv辰n kilpailuedun saavuttamiseen globaaleilla markkinoilla.
- 21. Suomen tulevaisuus big data -markkinoilla Innovatiivisuus Huippuosaaminen Vahva infrastruktuuri Avoin data
- 22. Suomen rooli big data -markkinoilla Hy旦dynnet辰辰n ja kehitet辰辰n laadukasta infrastruktuuria - palveluntarjoaja? Huippuosaamisen kehitt辰minen - osaamisvienti? Viranomaistoimintaan liittyvien ratkaisujen toteutukselle hyv辰t l辰ht旦kohdat - esimerkkimaa? Tiedon louhinnan ja tulkinnan ty旦kalujen kehitt辰j辰 - ohjelmistotuotanto?
- 23. Julkishallinnon hankkeet Merkitt辰vi辰 suurten datamassojen hy旦dynt辰miseen t辰ht辰辰vi辰 hankkeita on k辰ynniss辰 ja suunnitteilla. N辰m辰 ovat kuitenkin toistaiseksi marginaalissa. Arkip辰iv辰istymiseen n辰hd辰辰n viel辰 kuluvan aikaa.
- 24. K辰ynniss辰 olevia hankkeita OKM: Tutkimuksen tietoaineistot (TTA) ja Kansallinen digitaalinen kirjasto (KDK) -yhteisty旦 sek辰 AVOIN-hanke (Avoimen tiedon instrumentit) Trafi: Tiedonluovutusratkaisun hankinta - tavoitteena vastata sek辰 avoimen datan kysynn辰n kasvuun ja varautua my旦s big-data ratkaisujen kehitt辰miseen VRK: Rakennus - ja Kiinteist旦tietojen uudistamishanke (RaKi) Ilmatieteen laitos: Avoin data kts. Facebook fmibeta Helsingin kaupungin tietokeskus: Tietokeskuksen yksi keskeisimpi辰 teht辰vi辰 on avata p辰辰kaupunkiseudun kaupunkien julkisia tietovarantoja ns. avoimena datana Helsinki Region Infoshare -palvelunsa (www.hri.fi) kautta kenen tahansa vapaasti ja maksutta hy旦dynnett辰v辰ksi
- 25. Tulevia hankkeita OKM: TTA-yhteisty旦n ja AVOIN-hankkeen jatkoa valmistellaan. Tutkimuksen tietoaineistojen pitk辰aikaiss辰ilytysj辰rjestelm辰 (TTA-PAS) k辰ynnistyy syksyll辰 Trafi: Autojen paikka- ja kilometritiedon ker辰辰minen ajoneuvorekisteriin ja n辰iden yhdist辰minen mm. onnettomustilastoihin yms. VRK: Henkil旦tietojen uudistamisihanke (HeTi?)
- 26. Avoin data, data.suomi.fi: Avoin data -sivulle ker辰t辰辰n julkisen hallinnon avoimia datoja. Tarkoituksena on edist辰辰 hallinnon avoimuutta ja jakaa julkista tietoa kaikkien k辰ytt旦旦n.
- 27. McKinsey: 250 billion - potential annual value to Europes public sector administration in use of big data more efficiently.
- 28. S辰辰st旦j辰, ennustettavuutta big datasta L辰pin辰kyvyytt辰, avoimuutta, automaattisuutta verotukseen Lis辰辰 l辰hteit辰, parempi ennustettavuus Henkil旦kohtaisempaa, proaktiivista palvelua kansalaisille Ehdotuksia tilanteen mukaan, kokonaisasiakkuus Petosten, v辰辰rink辰yt旦sten tarkempi tunnistaminen, nopeampi reagointi Veronkierto, identiteettirikokset Kansalaisten mielipiteiden tulkinta p辰辰t旦ksenteossa, demokratian edist辰minen Aloitteista, vaihtoehdoista p辰辰t旦ksentekoon
- 29. S辰辰st旦j辰, ennustettavuutta big datasta Kansallinen turvallisuus, ep辰ilytt辰v辰n toiminnan/tilanteen tunnistaminen Rikokset, onnettomuusriskit (NYC, paloturvallisuus) Infrastruktuuriongelmien tunnistaminen ennen onnettomuuksia, korjaustoimet ennen kalliita vahinkoja Crowdsourcing Reagointikyky kansallisessa terveydenhuollossa, oireiden tunnistaminen ajoissa Kausiflunssat, rokotukset, omahoito
- 30. Policy Exchange, The Big Data Opportunity, 2012: http://www.policyexchange.org.uk/images/publications/the%20big%20data%20opportunity.pdf The purpose of this short report is threefold: to inspire policy makers around the opportunity for data and analytics to transform public service delivery, to sound a note of caution about the challenges this agenda poses for the public sector, and to make recommendations for how government might begin to realise the former whilst addressing the latter.
- 31. Ideoita Euroopasta (UK) Analytiikkatiimi yli osastorajojen Eettisen analytiikan s辰辰nn旦t ja esimerkki Julkishallinnon toiminnan mittarit ja avoimuus Just because government can do something with big data, that doesnt mean that it should do it. In the final analysis, if a Minister would not be comfortable putting themselves or their family under the sort of scrutiny required by a departmental big data initiative, then that initiative should not make it into government policy.
- 32. Kysymyksi辰 omalle organisaatiolle 1. Tied辰mmek旦, mit辰 tied辰mme? 2. K辰yt辰mmek旦 dataa p辰辰t旦ksenteon tukena? 3. Kuinka nopeasti saamme dataan pohjautuviin kysymyksiimme vastaukset? 4. Mik辰 on strategiamme big datan hy旦dynt辰misess辰? 5. Kenen vastuulla on datan hy旦dynt辰minen, ja onko t辰m辰 oikea taho organisaatiossamme?
- 33. Hy旦dynn辰 big data! Miten julkishallinto voi tehostaa omaa toimintaansa ja vauhdittaa osaltaan databisneksen kasvua? Mist辰 data? Miten hy旦dynnett辰viss辰? Mill辰 tekniikoilla?
- 34. Big datan l辰hteit辰 Internet Sosiaalinen media Transaktiotietokannat Videovalvonta Sensorit Esineiden internet (Internet of Things, IoT) Avoin data Datamarkkinapaikat
- 35. Saatavilla olevat datavarannot (avoin data, datamarkkinat) Potentiaalinen data (ei viel辰 ker辰t辰) Digitaalinen todellisuus (internet, sosiaalinen media) Fyysinen todellisuus (sensorit, esineiden internet) Mist辰 sit辰 dataa oikein tulee? Organisaation hallussa tai saatavilla oleva data (ERP, CRM, DW, RDBMS) 息 Ivorio 2013
- 36. Suppein n辰k旦kulma dataan T辰st辰 n辰k旦kulmasta big data koskettaa ilmi旦n辰 n. 0.2 % maailman organisaatioista Eih辰n meill辰 edes ole big dataa! Pilvipalvelut sopivat pilotointiin. Yrityksen oma strukturoitu data Yrityksen viel辰 hy旦dynt辰m辰t旦n data Yrityksen viel辰 ker辰辰m辰t旦n data 息 Ivorio 2013
- 37. Suppeahko n辰k旦kulma dataan T辰st辰 n辰k旦kulmasta big data koskettaa ilmi旦n辰 n. 3 % maailman organisaatioista Liiketoimintakriittist辰 dataa ei voida laittaa pilveen, ehk辰 jotain lokitietoja tms. Privaattipilvi kiinnostaa! Yrityksen oma strukturoitu data Yrityksen viel辰 hy旦dynt辰m辰t旦n data Yrityksen viel辰 ker辰辰m辰t旦n data 息 Ivorio 2013
- 38. Laaja n辰k旦kulma dataan T辰st辰 n辰k旦kulmasta big data koskettaa ilmi旦n辰 n. 22 % maailman organisaatioista Mihink辰s me laitetaan kaikki tuo data... Olisiko julkisilla pilvipalveluilla jotain annettavaa? Yrityksen oma strukturoitu data Yrityksen viel辰 hy旦dynt辰m辰t旦n data Yrityksen viel辰 ker辰辰m辰t旦n data 息 Ivorio 2013
- 39. Verkostoitunut n辰k旦kulma dataan T辰st辰 n辰k旦kulmasta big data koskettaa ilmi旦n辰 n. 72 % maailman organisaatioista Verkottunut yritys ei voi hillota dataansa! Organisaatio Kumppani Kumppani Kumppani Kumppani Kumppani Kumppani 息 Ivorio 2013
- 40. Kokonaisvaltainen n辰k旦kulma dataan T辰st辰 n辰k旦kulmasta big data koskettaa ilmi旦n辰 n. 98 % maailman organisaatioista Palvelinkellarissa homehtuva data ei tuota lis辰arvoa tai kilpailuetua! Avoin data (dokumentoidut rajapinnat) Data marketplace (pilvess辰 olevat datan markkinapaikat) Datakauppiaat (yksitt辰iset suoraan omaa tai verkostonsa dataa myyv辰t) Puoliavoin data (ei rajapintoja, hajallaan) 息 Ivorio 2013
- 41. Big datan hy旦dynt辰miskohteita Markkinointi Suositukset (recommendation engine) Tilastollinen analyysi Tutkimus- ja kehitysty旦 Mallintaminen ja ennustaminen Resurssien kohdentaminen Mahdollisuuksien tunnistaminen vaatii toimialan ja organisaation ymm辰rt辰mist辰.
- 42. Big datan teknologiat Hadoop (tunnetuin yksitt辰inen uusi teknologia) NoSQL (uudenlaiset tietokannat) Appliancet (valmisratkaisut) In-memory-, In-database analytics Pilvipalvelut Amazon Elastic MapReduce Google BigQuery Microsoft HDInsight
- 43. Hadoopin asema big data -ilmi旦ss辰 Hadoop Tiedon m辰辰r辰 Tiedonrakenteisuus 2 Tb1 Gb 20 Tb 200 Tb Nearly all sectors in the US economy had at least an average of 200 terabytes of stored data per company with more than 1,000 employees. McKinsey 2011 By 2015, 65 percent of packaged analytic applications with advanced analytics will come embedded with Hadoop. Gartner 2013 息 Ivorio 2013
- 44. Pilvipalveluiden rooli nyt ja tulevaisuudessa Riskit旦n tapa l辰hte辰 liikkeelle kokeillaan ennen investointeja ja sitoutumista Ketteryys ja kustannustehokkuus kustannukset muuttuvia, tulevaisuutta ei tarvitse ennustaa Tulevaisuudessa yh辰 keskeisemm辰ss辰 roolissa mit辰 suurempi painoarvo jaetulla, avoimella tai datamarkkinapaikoista saatavalla datalla on, sit辰 mielekk辰辰mpi vaihtoehto pilvipalvelut ovat
- 45. Gartner: Through 2015, 85% of Fortune 500 organizations will be unable to exploit big data for competitive advantage.
- 47. Kiitos