Як вважає генеральний директор Cloudera Майк Олсон, платформа аналітики Hadoop має деякі значні обмеження, пов'язані зі швидкістю та складністю. Однак лідери галузі - включаючи власну фірму - працюють над тим, щоб змінити це, впевнені, що цей інструмент дослідження розвиватиметься фундаментальними шляхами в найближчі роки.
На минулорічній Страт-конференції Олсон попросив аудиторію уявити собі, якби вона була створена сьогодні, Hadoop буде розроблений по-іншому, вважаючи, що деякі конкретні зміни можуть відкрити нові шляхи для досліджень у таких сферах, як освіта, енергетика та сільське господарство. Посилаючись на космолога та наукового автора Карла Сагана, Олсон наголосив на важливості розбиття даних високого рівня для більшої аудиторії.
"Я думаю, що ми готові до краю великих відкриттів, які мають значення для бізнесу та суспільства", - сказав Олсон.
Одним із прикладів, зазначив він, є наукове відкриття, яке стало можливим завдяки роботі наукових фахівців на Великому адронному колайдері у Швейцарії. За словами Олсона, саме щоденна оцінка 37 терабайт даних призвела до таких ключових зрушень, як відкриття вододілу Гіггса-Босона, що виявило ключові аспекти матерії та енергії. Олсон додав, що Hadoop допомагає допомагати в цих фундаментальних науково-дослідних проектах, захоплюючи величезну кількість даних в одному сховищі, але що важко взаємодіяти з цими даними в режимі реального часу.
Розмірковуючи про те, як Hadoop та подібні технології можуть допомогти вченим у ключових сферах, таких як охорона здоров’я, Олсон також оголосив проект Імпала, що над його компанією працює два роки, з двома четвертинами бета-тестування в координації з великими клієнтів. Проект Impala, за словами Олсона, - це технологія "100% відкритого коду" з ліцензуванням Apache, яка працює з Hadoop як "двигун запитів у реальному часі". Це, сказав Олсон, дозволяє те, що він називає "швидкістю роздумових запитів", де користувачі можуть задати питання, отримати відповідь і сформулювати нове питання для ефективного використання основних кластерів даних.
"Це дає вам новий спосіб отримати свої дані", - сказав Олсон, окреслюючи, як подібний прогрес може зламати додаткові можливості для вирішення основних проблем у США та за кордоном.
