Obsah:
- The Big Data Hype
- Minulosť Hype: Výhody veľkých dát
- Prvý zákon o veľkých údajoch
- Experiment veľkých dát
Používanie technológie na pomoc pri procese získavania, organizácie a analýzy údajov s cieľom robiť lepšie rozhodnutia nie je ničím novým, má však nové meno a toto meno je veľké dáta. Toto meno tiež dostáva veľa humbuk., oddelíme humbuk bzučiaka od reality situácie.
Hovoril som s Gil Pressom, vedúcim myslenia a vedúcim partnerom marketingového, publikačného a výskumného poradenstva gPress. Vráťme sa teda o krok späť a pozrime sa, prečo veľké dátové buzzword zasiahlo hlavný prúd a aký potenciál má pre budúcnosť. (Ak si chcete prečítať niektoré informácie o pozadí, pozrite sa na veľké údaje: ako sú zachytené, rozdrvené a použité na obchodné rozhodnutia.)
The Big Data Hype
Chcete poznať skutočný dôvod, prečo sa pojem veľké dáta stal tak populárnym? Gil Press, špičkový vodca v tejto oblasti, má niekoľko odpovedí. Zastával vedúce pozície v oblasti marketingu a riadenia výskumu v spoločnostiach NORC, DEC a EMC. Nedávno pôsobil ako vedúci marketingu marketingu v oblasti vedúceho myslenia v spoločnosti EMC, kde študoval „Koľko informácií?“ (2000 a 2003 s UC Berkeley) a Digital Universe (2007-2011 s IDC) pomohli začať konverzáciu o veľkých údajoch.
„Big Data je jedným z tých štítkov, ktoré sa z času na čas objavujú a stali sa populárnymi ako súhrnná veta, ktorá popisuje nový súbor technológií a procesov a ich potenciálny alebo skutočný vplyv na život a prácu.
„Termín, ktorý súvisí s technológiou, sa stáva populárnym alebo sa stáva bzučiakom, pretože ho začalo výrazne propagovať množstvo malých a veľkých dodávateľov technológií. Približne v roku 2005 sa webové spoločnosti ako Google, Facebook a Yahoo začali vyvíjať a zavádzať nové nástroje osobitne navrhnuté na spracovanie a analýzu rozsiahlych zbierok neštruktúrovaných údajov.
„Keď sa tieto nové nástroje a technológie neskôr rozvíjali začínajúcimi podnikmi - a keď ich používali malé spoločnosti predávajúce produkty a služby na získavanie údajov, obchodné informácie a analytické produkty a služby - všetci prijali veľké údaje ako spôsob, ako sa odlíšiť od konkurencie a narušiť existujúci trh, “uviedol Press.
Aká bola posledná podpora, ktorá z veľkých dát urobila špičkové technické slovo?
„Prišli to od veľkých predajcov technológií, ktorí v niektorých prípadoch získali tieto menšie spoločnosti, a za nový termín postavili svoje veľké marketingové rozpočty a trhovú silu, “ tvrdí Press.
Pokiaľ ide o analýzu veľkých údajov, tento pojem našiel svoje korene aj v marketingu.
„Je zaujímavé poznamenať, že ako spôsob premostenia medzi najnovším buzzwordom spojeným s analýzou údajov, „ analytics “(popularizovaným Tomom Davenportom v roku 2006) a novým, „ big data “, veľa IT spoločností propaguje kombinovaná „analytika veľkých údajov“, povedal Press.
Minulosť Hype: Výhody veľkých dát
Pri pohľade okolo humbuk, Press vysvetľuje, že vodiči za fyzické atribúty veľkých dát možno priradiť k:- Rastúci počet zariadení, ktoré zachytávajú a vytvárajú údaje
- Zvyšujúca sa prepojenosť údajov
- Lacná úložná kapacita
- Inovatívny softvér na spracovanie a analýzu informácií v rámci údajov
„Snaha robiť lepšie rozhodnutia nie je nová, ale termín„ veľké dáta “poukazuje na novú kombináciu technológií, procesov a postupov, ktoré prispievajú k rozvoju novej kompetencie získavania hodnoty z údajov, či už veľkých alebo malých, “ povedal.
Na otázku, aké veľké údaje budú vyzerať za 10 rokov a či bude možné získať analýzu všetkých svetových informácií v reálnom čase, Press uviedol, že váhal s vytváraním predpovedí do budúcnosti, ale poskytuje ďalšie informácie o niektorých rozumné predpoklady.
„Myslím si, že je rozumné predpokladať, že bude viac údajov a že budeme mať nové nástroje na čistenie, spracovanie a analýzu údajov, “ hovorí. „Na podporu rozhodnutí organizácií, vlád a jednotlivcov sa použije lepšie alebo horšie údaje.“ (o rastúcom množstve digitálnych údajov v infografike, koľko údajov sa generuje online každú minútu?)
Skutočná hodnota veľkých údajov, okrem silného mechanizmu zarábania peňazí a znižovania rizika, spočíva v jeho schopnosti pozitívne ovplyvniť životný štýl ľudí. Pán Press poskytuje komentáre o tom, ako možno dosiahnuť skutočnú hodnotu z fenoménu veľkých údajov - počnúc zlepšením zdravia.
„Nie som si istý, či sa životy dajú predĺžiť vďaka veľkým údajom, ale ak je to možné alebo bude možné, určite to ovplyvní jednotlivcov, “ uvádza. „Zostať v oblasti zdravotnej starostlivosti, ale s trochu menej ambicióznymi cieľmi, veľké údaje nám môžu pomôcť žiť zdravší život a zlepšiť naše rozhodnutia týkajúce sa zdravia, “ uviedol Press a citoval nové aplikácie zdravotnej starostlivosti ako kľúčový nástroj v tejto oblasti.
Prvý zákon o veľkých údajoch
Napokon, Press uviedol, že nie je len na vedcoch, aby zlepšovali a využívali veľké údaje - priemerný človek môže tiež pomôcť.
„To, čomu hovorím Prvý zákon o veľkých údajoch, uvádza, že hodnota údajov rastie s rastom počtu ľudí, ktorí zdieľajú podobné údaje - alebo pri formulácii Metcalfeho zákona je hodnota údajov úmerná druhej mocnine počtu ľudia zdieľajúci podobné údaje, “povedal Press. „Čím viac zdieľame naše osobné údaje, tým väčšia hodnota, ktorú môžeme my - a svet - dostať z toho.“
Experiment veľkých dát
Neverte len humbuk, zistite, čo pre vás alebo vašu organizáciu znamená fenomén veľkých dát: pomocou tohto jednoduchého myšlienkového experimentu: Identifikujte hlavný problém alebo frustráciu vo svojom živote alebo práci a položte si otázku, či veľké údaje môžu hrať úlohu v roztoku. (Viac informácií o tom, ako sa veľké údaje menia, nájdete v časti Vývoj veľkých dát.)
Pozrite sa na celý rozhovor s Gil Press nižšie.
Troy Sadkowsky: Aká je vaša definícia veľkých dát?
Gil Press: Veľké údaje sú jedným z týchto štítkov, ktoré sa čas od času objavujú a sú populárne ako súhrnná veta, ktorá popisuje nový súbor technológií a procesov a ich potenciálny alebo skutočný vplyv na život a prácu. Pre organizácie, vládne agentúry a jednotlivcov znamenajú veľké údaje novú zručnosť, ktorá by mohla pomôcť pri prijímaní lepších rozhodnutí. Snaha o lepšie rozhodnutia nie je nič nové. Pojem veľké údaje však poukazuje na novú kombináciu technológií, procesov a postupov, ktoré by mohli prispieť k rozvoju novej kompetencie získavania hodnoty z údajov, či už veľkých alebo malých.
TS: Ako budú vyzerať veľké údaje za 10 rokov?
GP: Vo vzťahu k vyššie uvedenej definícii veľké údaje ovplyvňujú množstvo údajov, rýchlosť, z ktorej možno odvodiť význam, a rýchlosť, v ktorej sa má konať. Bude možné získať analýzu všetkých svetových informácií o akejkoľvek zvedavosti v reálnom čase?
Neváham povedať niečo o budúcnosti. Myslím si však, že je rozumné predpokladať, že bude viac údajov, že budeme mať nové nástroje na čistenie, spracovanie a analýzu týchto údajov a že viac údajov sa použije, k lepšiemu alebo horšiemu, na podporu rozhodnutí organizácií, vlády a jednotlivci.
TS: Dosiahneme kvantitatívnu hornú hranicu vyššie uvedených atribútov? Mooreov zákon teraz platí pre tranzistory, úložisko pevného disku, sieťovú kapacitu a pixely, ale ako dlho si myslíte, že vydrží?
GP: Mooreov zákon bude trvať dovtedy, kým vydrží ľudská vynaliezavosť. Slúžilo ako motivačný cieľ pre inžinierov a už viac ako štyri desaťročia našli spôsoby, ako prekonať akékoľvek vnímané obmedzenia.
TS: Prečo sa v poslednej dobe stali tak populárne veľké údaje?
GP: Zvyčajne sa stáva populárny termín súvisiaci s technológiou, tj stáva sa módnym slovom, pretože ho začalo výrazne propagovať množstvo malých a veľkých dodávateľov technológií. Koncom 90. rokov sa pojem „veľké údaje“ používal v kontexte aplikácií vizualizácie údajov pre vedu. Okolo roku 2005 začali webové spoločnosti ako Google, Facebook a Yahoo vyvíjať a zavádzať nové nástroje určené špeciálne na spracovanie a analýzu rozsiahlych zbierok neštruktúrovaných údajov. Keď sa tieto nové nástroje a technológie neskôr rozvíjali začínajúcimi podnikmi a keď ich používali malé spoločnosti predávajúce produkty a služby v oblasti získavania údajov, business intelligence a analytických produktov, všetky prijali veľké údaje ako spôsob, ako sa odlíšiť od konkurencie a „ narušiť “existujúci trh. Posledná podpora, vďaka ktorej sa veľké údaje stali bzučivým slovom, prišli od veľkých predajcov technológií, ktorí v niektorých prípadoch získali tieto menšie spoločnosti a postavili svoje nové marketingové rozpočty a trhovú silu za nový termín.
Je zaujímavé poznamenať, že ako prostriedok na preklenutie medzi najnovším buzzwordom spojeným s analýzou údajov, „analytics“ (popularizovaným Tomom Davenportom v roku 2006), a novým, „big data“, veľa IT spoločností propaguje kombinovaná „veľká analýza údajov“.
TS: Aká je skutočná hodnota veľkých údajov? Môžu sa zarobiť peniaze, môžu sa predĺžiť životy, môžu sa znížiť riziká a dá sa dosiahnuť prestíž, ale čo môžu veľké údaje urobiť pre priemerného človeka?
GP: Nie som si istý, či sa životy dajú predĺžiť vďaka veľkým údajom, ale ak je to možné alebo bude možné, určite to ovplyvní jednotlivcov. Zostať v oblasti zdravotnej starostlivosti - ale s trochu menej ambicióznymi cieľmi - veľké údaje nám môžu pomôcť žiť zdravší život a zlepšiť naše rozhodnutia týkajúce sa zdravia. Toto je zrejmé v prudko rastúcom poli „osobnej analýzy“, začínajúcom v roku 2006, keď sa topánky Nike + pripájali k iPodu.
Dnes tieto aplikácie prechádzajú od sledovania a analýzy rutinných cvičení k pomoci so zdravím, bohatstvom a prácou. Verím, že uvidíme, ako sa tieto aplikácie posunú ďalej k tomu, čo by som nazval „osobné veľké údaje“, čo vám umožní porovnávať sa s ostatnými a poskytnúť jednotlivcom nástroje na analýzu relevantných rozsiahlych údajov.
TS: Aké kroky by mal priemerný človek podniknúť, pokiaľ ide o veľké údaje? Je niečo, čo môžeme všetci urobiť, aby sme vám pomohli?
GP: To, čomu hovorím Prvý zákon o veľkých údajoch, uvádza, že hodnota údajov rastie s nárastom počtu ľudí, ktorí zdieľajú podobné údaje. Alebo pri formulácii Metcalfeho zákona je hodnota údajov úmerná druhej mocnine počtu ľudí, ktorí zdieľajú podobné údaje. Čím viac budeme zdieľať naše osobné údaje, tým väčšia hodnota, ktorú my - a svet - z toho môžeme získať.
Ďakujem Gil Press za rozhovor. Môžete si ho pozrieť - spolu s dlhým zoznamom ďalších odborníkov na veľké dáta - v službe Big Data: Experts to Twitter on Twitter.
