Clouderan toimitusjohtaja Mike Olson sanoo, että Hadoopin analysointijärjestelmässä on joitain merkittäviä nopeuden ja monimutkaisuuden rajoituksia. Teollisuuden johtajat - mukaan lukien oman yrityksen johtajat - pyrkivät kuitenkin muuttamaan sitä, luottaen siihen, että tämä tutkimusväline kehittyy perusteellisella tavalla tulevina vuosina.
Viime vuoden Strata-konferenssissa Olson pyysi yleisöä kuvittelemaan, kuinka Hadoop suunnitellaan nykyään eri tavalla, jos tietyt muutokset voisivat avata uusia portteja tutkimukselle aloilla, kuten koulutus, energia ja maatalous. Mainitseen kosmologia ja tieteellistä kirjailijaa Carl Sagania Olson painotti, että on tärkeää hajottaa korkean tason tiedot suuremmalle yleisölle.
"Uskon, että olemme valmiita suurten löytöjen reunaan, joilla on merkitystä yrityksille ja yhteiskunnalle", Olson sanoi.
Yksi esimerkki, hän huomautti, on tieteellinen löytö, jonka mahdollinen tieteellisten ammattilaisten työ on tehnyt Sveitsin suuressa hadronin törmäyksessä. Olsonin mukaan se on 37 teratavun datan päivittäinen arviointi, joka on johtanut keskeisiin parannuksiin, kuten vesistöalueen Higgs-Boson-löytö, joka paljasti aineen ja energian keskeiset näkökohdat. Olson lisäsi, että Hadoop auttaa näissä perustutkimusprojekteissa kaappaamalla valtavan määrän tietoja yhdestä arkistosta, mutta että näiden tietojen kanssa on vaikea olla tekemisissä reaaliajassa.
Laajentamalla tapoja, joilla Hadoop ja vastaavat tekniikat voivat auttaa tutkijoita avainaloilla, kuten terveydenhuollossa, Olson ilmoitti myös Impala-hankkeesta, jota hänen yrityksensä on työskennellyt kaksi vuotta, ja kaksi neljäsosaa beetatestauksesta on koordinoitu suurten asiakkaita. Impala-projekti, Olsonin mukaan, on "100% avoimen lähdekoodin" tekniikka, jolla on Apache-lisensointi ja joka toimii Hadoopin kanssa "reaaliaikaisena kyselymoottorina". Tämä, Olsonin mukaan, sallii sen, mitä hän kutsuu "ajatuskyselyjen nopeudeksi", jossa käyttäjät voivat kysyä kysymyksen, saada vastauksen ja muotoilla uuden kysymyksen tärkeiden tietoklustereiden tehokkaaksi käyttämiseksi.
"Se antaa sinulle uuden tavan hankkia tietojasi", Olson kertoi, kuinka tällainen eteneminen voisi avata lisämahdollisuuksia suurten ongelmien ratkaisemiseksi Yhdysvalloissa ja ulkomailla.
