Video: Mike Olson, predsjednik tvrtke Cloudera, o istraživačkim mogućnostima Hadoopa i budućnosti

Autor: Judy Howell
Datum Stvaranja: 2 Srpanj 2021
Datum Ažuriranja: 11 Svibanj 2024
Anonim
The Next Generation - Mike Olson keynote
Video: The Next Generation - Mike Olson keynote


Oduzeti:

Platforma analitike Hadoop ima značajna ograničenja koja uključuju brzinu i složenost, ali lideri u industriji rade na tome da to promijene.

Kao što kaže, izvršni direktor Cloudera Mike Olson, platforma Hadoop analitika ima značajna ograničenja koja uključuju brzinu i složenost. Međutim, lideri u industriji - uključujući one u njegovoj tvrtki - rade na tome da to promijene, uvjereni da će se ovaj istraživački alat u narednim godinama esencijalno razviti.

Na prošlogodišnjoj Strata konferenciji, Olson je zamolio publiku da zamisli kako bi, ako bi danas bio stvoren, Hadoop drugačije dizajniran, smatrajući da bi neke konkretne promjene mogle otvoriti nova vrata za istraživanje u područjima poput obrazovanja, energetike i poljoprivrede. Citirajući kozmologa i znanstvenog autora Carla Sagana, Olson je naglasio važnost uništavanja podataka na visokoj razini za veću publiku.

"Mislim da smo spremni na ivici velikih otkrića koja su bitna za posao i društvo", rekao je Olson.



Jedan je primjer, istaknuo je, znanstveno otkriće omogućeno radom znanstvenih stručnjaka na Velikom hadronskom sudaraču u Švicarskoj. Prema Olsonu, svakodnevno ocjenjivanje 37 terabajta podataka dovelo je do ključnog napretka kao što je vodeno otkriće Higgs-Boson, koje je otkrilo ključne aspekte materije i energije. Olson je dodao da Hadoop pomaže pružiti pomoć u ovim temeljnim istraživačkim projektima hvatanjem ogromne količine podataka u jednom spremištu, ali da je s tim podacima teško komunicirati u stvarnom vremenu.

Izlažući o načinima na koji Hadoop i slične tehnologije mogu pomoći znanstvenicima u ključnim područjima, poput zdravstvene zaštite, Olson je također najavio projekt Impala, nešto na čemu njegova tvrtka radi već dvije godine, s dvije četvrtine beta testiranja u koordinaciji s glavnim klijenti. Projekt Impala, rekao je Olson, tehnologija je "100% otvorenog koda" s licencama Apache koja radi s Hadoopom kao "mehanizmom za ispitivanje u stvarnom vremenu". To, rekao je Olson, dopušta ono što on naziva "brzina upita za misao", pri čemu korisnici mogu postaviti pitanje, dobiti odgovor i formulirati novo pitanje za učinkovito korištenje glavnih klastera podataka.

"To vam daje novi način da dobijete svoje podatke", rekao je Olson, naglašavajući kako ovakav napredak može razbiti dodatne mogućnosti za rješavanje velikih problema u SAD-u i inozemstvu.