V tej objavi na blogu raziskujemo, ali so lahko veliki podatki ključ do tehnoloških inovacij in družbenega napredka ali pa tvegajo, da bodo postali orodje za nadzor in kontrolo.
V pravljici »Janko in Metka« sta se dva brata in sestra, ki sta se izgubila v gozdu, spuščala drobtine kruha, da bi si označila pot. Brata in sestra sta namerno puščala sledi sebe, kaj pa, če bi nekaj, kar predstavlja naju, uhajalo ven brez naše vednosti in označevalo najino pot? Sliši se kot pravljica, toda s penetracijo pametnih telefonov, ki presega 60 %, in kamerami CCTV, nameščenimi v vsakem kotičku Seula, ter računalniškimi omrežji, ki so zdaj nekaj običajnega v vsaki organizaciji, puščamo sledi informacij povsod, kamor gremo, ne da bi se tega sploh zavedali. Še več, te »sledi« ne izginejo, ko so posnete, ampak se shranijo na mestih, ki nam niso znana. Prizadevanja za ustvarjanje uporabne vrednosti z uporabo teh zbranih podatkov potekajo že dolgo časa in že zdaj lahko zlahka najdemo primere njihove uporabe v različnih vidikih našega življenja.
Izraz »veliki podatki« morda ni znan tistim, ki ga slišijo prvič, vendar je z našim življenjem tesneje povezan, kot si mislimo. V trenutku, ko zapustimo svoj dom in na avtobusu plačamo vozovnico, se ustvarijo informacije o naši poti na delo in prevoznih sredstvih. V trenutku, ko za kosilo potegnemo s kreditno kartico, se shranijo informacije o naših najljubših jedeh na jedilniku, in celo v supermarketu se nekam vnesejo informacije o naši najljubši hrani in vzorcih porabe. Ogromna količina informacij, ki se zberejo iz teh podatkov, se imenuje veliki podatki. Svetovni gospodarski forum je v svojem poročilu »Veliki podatki, velik vpliv: nove možnosti za globalni razvoj« navedel, da »raziskovalci in oblikovalci politik začenjajo spoznavati potencial, ki ga je mogoče sprostiti z izkoriščanjem te poplave podatkov«. Izraz »izkoriščanje« pomeni, da veliki podatki nimajo nobene vrednosti, če jih razumemo preprosto kot zbirko podatkov. Zato se veliki podatki ne nanašajo le na veliko količino podatkov, ki so se zbrali v daljšem časovnem obdobju, temveč vključujejo tudi tehnike za pridobivanje sistematičnih pravil in trendov iz teh podatkov.
Obstajajo različne metode za iskanje in analizo pravil iz velikih količin podatkov. Obdelava naravnega jezika je tehnologija, ki mehansko analizira človeški jezik in ga pretvori v strojni jezik, ki ga stroji lahko razumejo, kar omogoča pridobivanje in obdelavo uporabnih informacij. Družbeni mediji, ki jih uporabljamo, so prav tako odličen vir podatkov. Analiza družbenih omrežij je tehnika, ki analizira strukturo povezav in moč članov družbenih omrežij za sledenje širjenju in vplivu informacij. Analiza grozdov je metoda pridobivanja nabora informacij s podobnimi značilnostmi z združevanjem informacij s podobnimi značilnostmi. Poleg tega se razvijajo različne tehnologije za pridobivanje informacij iz podatkov. Ena najbolj razširjenih rešitev za analizo podatkov, ustvarjena s kombiniranjem teh tehnik, je Hadoop, ki ga uporabljata Yahoo in Facebook.
Dober primer uporabe velikih količin podatkov v našem vsakdanjem življenju je funkcija prepoznavanja glasu, ki jo najdemo v skoraj vseh mobilnih telefonih. Ne glede na to, kako pametni so stroji, obstajajo omejitve pri njihovi zmožnosti natančnega sklepanja o pomenu, namenu in slovničnih odnosih človeškega govora. Applova tehnologija prepoznavanja glasu, Siri, analizira slovnično strukturo uporabniških ukazov tako, da iz baze podatkov, ki organizira in kategorizira številna besedila, ki kroži po internetu, izvleče ponavljajoče se jezikovne vzorce, rezultate pa uporabi kot slovnično osnovo za program. Z drugimi besedami, spletno mesto samo deluje kot možgani programa.
Na ameriških predsedniških volitvah pred davnimi časi je Obama postal vroča tema zaradi svoje personalizirane kampanje, ki je aktivno uporabljala velike količine podatkov. Obamov tabor se je zelo potrudil pri zbiranju in organiziranju informacij, ki so reprezentativne za volivce, kot so podatki o kreditnih karticah in posojilih, modeli avtomobilov, naročnine na časopise in veroizpoved, nato pa so analizirali in kategorizirali njihove nagnjenosti. Nato so prek družbenih medijev posredovali informacije, ki bi zadovoljile njihove glavne interese. Na primer, gospodinja z otroki, ki obiskujejo javno šolo, ki je pred kratkim tvitnila o ekološki hrani, je prek Twitterja prejela okolju prijazno sporočilo Michelle Obame. Obama je s to aktivno uporabo podatkov v ključnih državah zmagal z veliko prednostjo.
Google je tudi eden najuspešnejših primerov komercializacije velikih podatkov. Google zbira podatke o interesih uporabnikov s sklicevanjem na njihovo zgodovino iskanja, obiskana spletna mesta, vsebino e-pošte in Googlovo omrežno storitev Google Plus. Ti podatki se analizirajo, da se uporabnikom prek Googlove e-poštne storitve Gmail zagotovijo oglasi, ki so najbolj ustrezni za njihove interese. Poleg tega se Google Translate ponaša z najvišjo natančnostjo med podobnimi programi, skrivnost njegovega uspeha pa je v ogromni količini podatkov in njihovi izkoriščenosti. Google Translate analizira besedilo številnih spletnih strani, napisanih v več kot 20 evropskih jezikih, prepozna slovnična pravila in jih uporablja kot osnovo za prevajanje, kar Google Translateu daje absolutni delež trga v Evropi. Poleg tega je potencial velikih podatkov neskončen. Od komercialnih aplikacij, kot so ocene restavracij in priporočila za izdelke v nakupovalnih središčih, do profiliranja kriminalcev na policijskih položajih, predhodnih raziskav za odločitve o vladni politiki in celo analize moči v baseballu, veliki podatki in njihove aplikacije prinašajo ogromne prihranke stroškov in nove možnosti.
Ko je potencial velikih podatkov začel pritegovati pozornost, so ga mnoga podjetja poskušala uporabiti, a presenetljivo se zdi, da ga le malo uporablja pravilno. Harper Reed, nekdanji direktor za tehnologijo v Obamovi kampanji, je izrazil zaskrbljenost zaradi pretirane uporabe izraza »veliki podatki« in dejal: »Veliki podatki so sranje.« Izjavil je, da med tistimi, ki trdijo, da se ukvarjajo z velikimi podatki, skoraj nihče nima dovolj podatkov, da bi jih lahko označili za »velikega«, in opozoril na pomanjkanje razumevanja velikih podatkov s strani javnosti, rekoč: »Izraz 'veliki podatki' se je začel nanašati na orodje za analizo in ne na same podatke.«
Z naraščajočo uporabo velepodatkov narašča zaskrbljenost, da se osebni podatki pretirano uporabljajo za dobiček podjetij. Obstajajo tudi pomisleki, da bo širjenje velepodatkov vladam olajšalo nadzor nad posamezniki, kar bo vodilo v družbo »velikega brata«. Glede na študijo Korejske agencije za informacijsko družbo povprečnega Američana kamera posname več kot 200-krat na dan. Poleg tega preveč institucij, vključno z zavarovalnicami in bankami, že hrani naše podatke. Edward Snowden, nekdanji uslužbenec ameriške nacionalne varnostne agencije, je na primer razkril obseg vladnega nadzora in dejal: »Obseg množičnega zbiranja informacij sega na širšo javnost.« Zato so skrbi glede varnosti in tesnoba zaradi razvoja nacionalnih zmogljivosti zbiranja informacij glavni oviri za širjenje tehnologije velepodatkov.
Zdi se, da bo trajalo nekaj časa, da se veliki podatki v Južni Koreji popolnoma uveljavijo. V anketi 240 podjetij in javnih ustanov v Koreji, ki jo je izvedla Korejska agencija za informacijsko družbo, je 77.1 % (208 ustanov) odgovorilo, da uporabljajo podatkovne baze, vendar je bil njihov rezultat za tehnologijo izrabe podatkov le 57.1 od 100, odstotek izrabe podatkov pri odločanju pa le 27.0 %. To je posledica dejstva, da veliki podatki v Koreji niso bili uvedeni zelo dolgo, zato je obseg podatkov v primerjavi z razvitimi državami majhen, metodologija za njihovo ravnanje pa še ni tehnično zrela.
Roboti, ki se pojavljajo v filmu »Ex Machina«, se ponašajo s sposobnostjo razmišljanja in govora na skoraj enaki ravni kot ljudje, programska oprema, ki tvori hrbtenico teh robotov, pa ni nič drugega kot največji iskalnik na svetu. Z drugimi besedami, vse informacije, ki jih ljudje puščajo na internetu, so možgani sami. To je morda nerealna zgodba, vendar odraža resničnost, da se veliki podatki uporabljajo kot pomemben kazalnik mišljenja in presoje v sodobni družbi. Od rudarjev podatkov prihodnjih generacij je odvisno, ali bodo iz vedno večje gore informacij izluščili vrednost in se odločili, kako jo bodo obdelali. Če se bodo uporabljali učinkovito, bodo prispevali k človeštvu in družbi na skoraj vseh področjih, vključno s politiko, gospodarstvom, družbo in kulturo.
