Kaikissa suruissaan valtavista NSA-tietokeskuksista, joissa on gaziljoonaa dataa bittiä yksityiselämästämme, on yksi asia, josta ei ole puhuttu paljon, ainakin CNN: ssä. Siihen liittyy esiin noussut tekninen ongelma pilvitekniikan, ison datan ja vaikuttavien fyysisten tietojen tallennuskeskusten kanssa, joita nyt rakennetaan ympäri maailmaa. Eli mikä se on? No, riippumatta siitä, kuka ylläpitää yhtä mammutti-IT-järjestelmää, joka ylläpitää näitä palveluja, tarvitaan ohjelmistojärjestelmiä, jotka auttavat kaikkea kyseistä tietoa pääsemään putkilinjaan nopeasti ulos. Tämä tarve edustaa yhtä mielenkiintoisimmista IT-kysymyksistä tai arvoituksista, joita ammattilaiset kohtaavat nykyään.
Kuten monet asiantuntijat huomauttavat, nykyinen tietojenkäsittelyn äärimmäinen kysyntä ylittää huomattavasti perinteiset lähestymistavat. Yksinkertaisesti sanottuna, yksinkertaisten tietokantarakenteiden ja työkalujen, kuten SQL-kyselyrajapinnan, käyttäminen ei aio tarjota tarpeeksi prosessointitehoa tai toiminnallisuutta viime vuosien aikana kehitettyjen omistusjärjestelmien kaltaisille. Nykypäivän suurten teknologiayritysten arkistot tarvitsevat erittäin skaalautuvaa tekniikkaa. He tarvitsevat tietojenkäsittelytyökaluja, jotka voivat syöttää ja tulostaa tuloksia huomattavasti enemmän kuin mitä yksittäinen palvelin voi helpottaa. He tarvitsevat ratkaisuja, jotka voidaan nopeasti vauhdittaa kasvuun, ratkaisuja, jotka sisältävät monimutkaisen tason tekoälyn, ratkaisuja, jotka on suunniteltu helppoon hallintaan tietotekniikkaosastolla.
Kysymys kuuluu, kuinka yritykset ja valtion virastot valloittavat perinteisen tietojenkäsittelypolun rajoitukset? Tässä tarkastellaan yhtä erittäin lupaavaa vaihtoehtoa: Ohjelmisto, joka käsittelee suuria tietoja ja useiden tietokeskusten hallintaa.