AVOIN DATA
Jouni Junkkaala, 4.3.2010, 18:55Avoin juttu
Tämä juttu on kirjoitettu alusta (melkein) loppuun yhteisöllisesti verkossa.
Internetin kehitys on nyt sekä teknisesti että käyttötapojen osalta sellaisessa vaiheessa, että datan avaaminen on kannattavampaa kuin koskaan ennen.
Mitä tarkoittaa AVOIN DATA?
Erityisesti julkishallinnon, mutta myös yritysten ja muiden organisaatioiden tietojärjestelmiin sekä yksityishenkilöille kertynyttä jalostamatonta informaatiota, johon on avattu maksuton pääsy organisaation ulkopuolisille.
Datan avoimuuden asteeseen vaikuttavat ennen kaikkea tekninen saavutettavuus (eli datan koneluettavuus), maksuttomuus, datan käyttöoikeudet (lisensiointi), sekä datan löydettävyys.
Julkisten organisaatioiden tietokannoissa lojuu valtavat määrät hyödyntämätöntä tietoa. Sitä ei yleensä pääse käyttämään edes naapurivirastosta saati hallinnon ulkopuolelta. Ja jos pääseekin, niin käytöstä pitää maksaa tai se on kohtuuttoman hankalaa.
Julkishallinnon datavarannon hyödyntämistä ohjaava maksuperustelaki lisää byrokratiaa, vähentää datan hyödyntämistä ja synnyttää jopa päällekkäisiä tietovarastoja, kun tehostamispaineet ohjaavat säästämään lyhytnäköisesti. Ehkä suurin syy suljettuihin tietovarastoihin on kuitenkin oman organisaation tulosohjaus ja asenne.
Hallinnon data on nykyaikaisen yhteiskunnan luonnonvara, joka voi paitsi lisätä hallinnon tehokkuutta ja kansalaisten osallistumismahdollisuuksia myös luoda uutta liiketoimintaa.
Avoin data luo hedelmällisen ekosysteemin
Suomen Akatemian rahoittama Somus-tutkimushanke järjesti viime syksynä Kansalaisosallistujan työkalut -kilpailun hallinnon avoimen datan ja sovellusten saamiseksi esiin. Kilpailuun tuli 23 hyvää ehdotusta, niin ideoita, pilotteja kuin valmiita sovelluksiakin.
Kilpailu osoitti koodaajille, että joku on kiinnostunut heidän sovelluksistaan. Hallinnon edustajat taas saivat avartavia ideoita datansa hyödyntämiseksi. Ennen kaikkea konseptoijat, koodaajat ja hallinnon edustajat pääsivät käynnistämään keskinäisen keskustelun siitä, miten julkisen datan avoimuutta voitaisiin edistää.
Miten tämä juttu tehtiin?
Vastaanvanlaisia mashup-kilpailuja järjestetään ympäri maailmaa. Useimpien tavoitteena on luoda avoimen datan ekosysteemi. Siinä datan jakaja ja hyödyntäjä eivät ole välttämättä vastavuoroisesti yhteistyössä, vaan kokonaisuus hyödyttää kaikkia. Kuka tahansa voi noukkia mitä tahansa ideoita ja aineistoja ja yrittää tehdä paremmin.
Myös netin ripeä kehitys perustuu pitkälti ekosysteemiajatteluun. Nykymuotoinen netti ei olisi mahdollinen ilman avoimia, yhdenmukaisia rajapintoja sekä ideoiden ja konseptien lainailua.
Datan lähteillä
Yhdysvaltain liittovaltio avasi toukokuussa 2009 data.gov-palvelun, jonne on koottu tiedot hallinnon tarjoamasta datasta ja sen käyttämisestä. Samanlaisia datakatalogeja on perustettu joka puolella maailmaa. Reilu kuukausi sitten Britanniassa julkistettu data.gov.uk on amerikkalaisvastinettaan laajempi, monipuolisempi ja paremmin koneluettava linked data -tukensa takia.
Suomen kansallinen datakatalogi on toistaiseksi vain lyhyt linkkilista (suomi.fi/datakatalogi), mutta valtion it-palvelukeskuksen ylläpitämä Suomi.fi-portaali kehittää siitä kehittyneempää versiota. Valtion katalogin lisäksi Somus-hanke ja Kirjastot.fi-palvelu kehittävät yhteisöllistä pääasiassa ohjelmoijille ja palveluideoijille suunnattua sivustoa (opengov.fi).
- Hallinto
Esimerkki: Ympäristöhallinnon Oiva-palvelu tarjoaa tietoa vesivaroista, eliölajeista ja alueiden käytöstä sekä ympäristöön liittyviä paikkatietoaineistoja. Hallinnossa meneillään olevat avaamishankkeet tulevat moninkertaistamaan tarjolla olevan datan lähivuosina.
- Yritykset
Esimerkki: Google tarjoaa muun muassa karttadataa avoimen rajapinnan kautta.
- Kansalaiset
Esimerkki: OpenStreetMap on vapaaehtoisvoimin ylläpidetty karttapalvelu, jota kuka tahansa voi päivittää esimerkiksi navigaattorinsa avulla keräämällä tiedolla.
”Pidän ehkä merkittävimpänä verkon tuomana muutoksena sitä, että tiedon tuottaminen, korjaaminen ja täydentäminen on tullut yksittäisten kansalaisten hyppysiin. Tässä ollaan kuitenkin vasta ihan alkumetreillä.” – Jyri Engeström
Miten (hallinnon) data saadaan auki?
1. Politiikka = Luotava yhteinen tahtotila tuoda julkiset tietovarannot kaikkien käyttöön, varmistettava päättäjien tuki.
Valtion it-johtaja Yrjö Benson: Nyt hallinnon data aukeaa!
2. Juridiikka = Sovittava datan käytön pelisäännöt, minkälaisilla ehdoilla dataa voi käyttää ja levittää.
3. Tekniikka = Julkaistava tiedot datavarannon sisällöstä, muodosta ja rajapinnoista, avattava verkkopalvelu datan jakamiseksi
4. Byrokratia = Sovittava toimintamallit ja kehitettävä jakamismyönteistä asennetta.
Muodolla on väliä
Datan hyödynnettävyyteen vaikuttaa suuresti se, minkälaisessa muodossa data on ja minkälaisten rajapintojen kautta pääsee käyttämään. Mitä yleisempiä standardeja datan muoto ja sen rajapinnat noudattavat, sitä helpompaa datan hyödyntäminen on.
Datan käytettävyyttä voidaan parantaa myös kuvaamalla datan merkityksiä semanttisen webin tekniikoin. Suomessakin rakennetaan kansallisen semanttisen webin infrastruktuuria FinnONTO-hankkeessa.
Linkkejä
- Wikipedia: Semantic Web
- Wikipedia: Linked Data
- Tim Berners-Leen innostava esitys linked datasta
- Linking Open Data -projekti
- Creating Linked Data
- Can we learn anything from failure of many B2B Exchanges?
- Rethinking Open Data
Datan löytämisen helpottamiseksi tieto siitä pitää julkaista. Datavarantoja esitteleviä koontipalveluita kutsutaan yleensä datakatalogeiksi.
Standardit myöhemmin
Jos data ei ole valmiiksi standardimuotoista, voi sopivien rajapintojen etsiminen, määrittely ja toteutus osoittautua aikaa vieväksi ja kalliiksi.
Kannattaakin pohtia, voisiko datan julkaista sellaisenaan ja kertoa siitä sopiville tahoille. Jos data on jollekin tärkeää, se otetaan käyttöön tavalla tai toisella.
Tarvittavia rajapintoja voi toteuttaa saadun palautteen perusteella. Pohtimalla datan julkaisutapaa yhdessä tarvitsijoiden kanssa voidaan vähentää turhaa työtä.
Bisnestä datanvälittäjälle?
Rajapintapalveluiden kaupallinen järjestäminen voi myös muodostua suhteettoman kalliiksi.
Verkkorajapintapalveluihin voisikin syntyä uutta liiketoimintaa, jos joku taho päättäisi toimia avoimen datan välittäjänä. Se helpottaisi sekä datan julkaisua että käyttöä.
Datan omistajan ei tarvitsisi investoida netin reunalle tulevaan palvelininfraan ja kaistaan sekä niiden varmistamiseen ja turvallisena pitämiseen. Omistaja voisi rekisteröidä oman datalähteensä ”datavälityskeskukseen”, joka sitten tarjoaisi sen kaikilla mahdollisilla palvelukutsumuodoilla eteenpäin.
Välityskeskukseen voisi joko viedä dataa tai kertoa rajapinnan, jolla keskus saa haettua raakadatan itselleen. Näin datan käyttökin helpottuisi, kun kutsumuodot olisi aina samanlaisia.
Aiemmin verkkopalvelussa
Kertokaa nyt minullekin mitä järkeä tässä on?
Lukekaa varsinkin tämä: Miksi tässä ollaan?
http://www.tietoviikko.fi/keskustelu/?threadId=10283
Tämä kaikki nyt pitäisi luovuttaa ilmaiseksi yrityksille jotka ovat jo saaneet siitä maksun ja laskuttavat jatkuvasti ja sen jälkeen kaikki luovutetaan ilmaiseksi.
Voiko mitään hölmömpää enää keksiä?
Ensin julkisten organisaatioiden tietokannoissa oleva data vapauttaa panttivankeudesta ja vasta sen jälkeen voidaan pohtia miten sitä jaetaan ja millä hinnalla.
Tässä avoimmuus on käännetty päälaelleen. Julkisten organisaatioiden maksama pitää jakaa ilmaiseksi yrityksille vapaasti hyödynnettäväksi. Organisaatiot kuitenkin ovat maksaneet noista järjestelmistä ja maksavat kokoajan.
Tämä 'Avoimen jutun' laatikossa oleva Mitä tarkoittaa AVOIN DATA? laatikon löpinä on aivan täyttä soopaa. Tuossa datassa ei ole mitään avointa eikä sitä mitenkään voi sanoa maksuttomaksi tai lisenssivapaaksi. Oracle keksii takuuvarmasti aivan välittömasti laskutusperusteen heti kun tuota dataa aletaan jakamaan vapaasti.
Rajapinnat ovat yritysten tarkasti varjelemia salaisuuksia. Kun ei edes saman firman potilastietojärjestelmästä voi siitää dataa toisen kunnan järjestelmään. Kun tehdään kuntaliitos ei siinä mitään tietoja yhdistetä vaan jatketaan isomman osapuolen tietokannan käyttämistä ja pienemmän kunnan asukkaiden osalta aloitetaan 'tyhjästä'. Onneksi sentään jollakin tavalla historiaa päästään katselemaan.
Jos avoimesta aletaan tuota tietoa jakamaan miksi julkisorganisaation pitää sitten maksaa tuon datan säilytyksestä ja ylläpidosta? Tehkööt sitten yritykset ilmaiseksi myös kun ilmaiseksi saavat hyödynkin.
Verorahoilla kerätyt tietoaineistot annetaan veronmaksajien käyttöön.
Yleensä käytetään vertausta yleiseen tieverkkoon: verorahoilla rakennetaan ja ylläpidetään, tehokas tieverkko edistää kansantaloutta.
USA:n näkökulma on ihan oikea: jos datan keräys on kerran verovaroilla maksettu pitää se olla ilmaiseksi kaikkien saatavilla ja hyödynnettävissä.
Julkishallinnon suomalaistyylisessä kaksoisrahastuksessa ei ole mitään järkeä.
Vertaan avointa dataa ja tietoa jätteiden hyödyntämiseen. On paljon sellaista tietoa, joka käyttäjän omassa varastossa kompostoituu hyödyttömäksi, mutta joku toinen pystyy murskaamaan siitä esille uutta ja hyödyllistä ehkä hyvää bisnestäkin.
Kaikilla yrityksillä on sellaista tietoa, jonka jalostaminen omissa nurkissa ei onnistu osaamisen puutteen tai bisneksen rajallisuuden takia, mutta joku toinen saa keräilykombolla aikaan ihmeitä.
- tieto ei kulu vaikka sitä jaetaan
- arvoton muuttuu arvokkaaksi toisen käsissä
- avoimuuden rajat syntyvät sopimalla
Ilmoituksesi käsitellään seuraavan työpäivän kuluessa.