Keďže všetky ohromenia obrovských dátových centier NSA, ktoré držia gazillions dátových bitov o našom súkromnom živote, je jedna vec, o ktorej sa veľa nehovorilo, aspoň o CNN. Zahŕňa to technický problém, ktorý sa objavil spolu s cloudovou technológiou, veľkými dátami a pôsobivými strediskami fyzického ukladania údajov, ktoré sa teraz stavajú po celom svete. Čo je to? No, bez ohľadu na to, kto spravuje jeden z mamutích IT systémov, ktoré prevádzkujú tieto zariadenia, sú potrebné softvérové systémy, ktoré pomôžu všetkým týmto údajom rýchlo vstúpiť a vystúpiť z potrubia. Táto potreba predstavuje jednu z najzaujímavejších IT otázok alebo hádaniek, ktorým dnes čelia odborníci.
Ako mnohí odborníci zdôrazňujú, dnešný extrémny dopyt po spracovaní údajov ďaleko presahuje tradičné prístupy. Jednoducho povedané, použitie jednoduchých databázových štruktúr a nástrojov, ako je napríklad rozhranie dotazov SQL, nezabezpečí dostatok spracovateľského výkonu alebo funkčnosti pre patentované systémy, ktoré sa vyvinuli v posledných niekoľkých rokoch. Archívy dnešných veľkých technologických spoločností potrebujú mimoriadne škálovateľnú technológiu. Potrebujú nástroje na spracovanie údajov, ktoré môžu vstup a výstup viesť k oveľa väčšiemu objemu, než aký dokáže jediný server. Potrebujú riešenia, ktoré možno rýchlo vylepšiť pre rast, riešenia, ktoré zahŕňajú zložité úrovne umelej inteligencie, riešenia, ktoré sú navrhnuté tak, aby ich oddelenie IT bolo ľahko spravované.
Otázkou je, ako si spoločnosti a vládne agentúry podmania obmedzenia tradičného spôsobu spracovania údajov? Tu sa pozrieme na jednu veľmi sľubnú možnosť: Softvér, ktorý spracováva veľké dáta a spravuje viac dátových centier.
