Шта је тачно хадооп? циницка теорија

Све што изгледа превише добро да би било истинито обично је. Такав би могао бити случај с Апацхе Хадооп-ом, баллихооед пројектом отвореног кода о којем сви стално причају. Па, шта је тачно ово? Добро питање!

Стручњаци сумњиво

Аналитичар Марк Мадсен из Треће природе приковао га је за зид на тренутак натраг у ружном комаду на ИнсидеАналисис.цом: "Шта је Хадооп. Шта Хадооп није." Како неко ко зна дизајнирати решења у стварном свету, а затим их заиста имплементирати, његови савети не треба занемарити.

Али овде тече дубља струја, а време је да откријемо корење ове фасцинантне флоре, да видимо да ли не можемо добити неку перспективу о ономе што се дешава на више макро нивоу. Уосталом, продавци стално говоре да је то велика ствар, а толико је и учесника.

Запослите Одборнике! (?)

Три компаније тренутно су у власништву већине Хадооповог почетног тржишта: Цлоудера, Хортонворкс и МапР. На недавном, прилично спорном брифингу преко Боулдер БИ Браин Труст-а (#БББТ), Јим Валкер из Хортонворкс-а је дао овај занимљив коментар:

"Не можете унапредити технологију ако не запослите починитеље!"

Дођите поново?

Не звучи ли то као нешто што би сенатор Палпатине могао рећи у филму "Ратови звезда"?

Сенатор Палпатине: "Запослите починитеље!"

Минион у близини: "Али, господине! Помислите на децу!"

За лаика који само покушавају да доврше ствари, починиоци су људи који су посвећени одређеном пројекту отвореног кода. Фондација Апацхе има строге протоколе по којима се њихови пројекти крећу напријед, што је често добра ствар.

Уз то, Валкер-ов коментар оправдава испитивање. Једно истакнуто питање (уз ризик да се договоре дани на игралишту) гласило је: Да ли је то обећање или претња? Да ли он каже да би Хортонворкс могао само узети лопту и отићи кући?

Сарадња или конкуренција?

Занимљив, парадоксални угао је, како се извештава, већина чланова екипе Хадооп-а (отприлике 30-так укупно) су из Хортонворкс-а и Цлоудера-који су конкуренти. Ово је веома занимљив случај такмичења.

Па, о чему се ради? Ево образоване претпоставке: Хадооп у великој мери дугује свом паметном плану који је осмислила група ризичних капиталиста и инжењера Силицијске долине који у основи покушавају да заштите своје окладе против Орацле-а.

Општа идеја је засијати тржиште темељем кода који се може побољшати и подупријети крпном флотом програмера који ће идеално, временом, креирати све врсте алата за управљање подацима, укључујући производе базе података. ВЦ-ови могу инвестирати и уновчити неки дан. Али постоје и неки озбиљни изазови.

Као и сва монолитна предузећа, Орацле се често нађе у прелазима много мањих играча. А ко не би желео само делић свог уморног прихода? Само у последњем кварталу, Орацле је резервисао ~ 9 милијарди УСД. Али изазов Великог Црвеног и њихово пребијање две су различите реалности.

Бесплатни вебцаст: Шта је Хадооп и куда иде? Придружите се Ерицу Каванагху, Робин Блоор-у и Тецхопедиа-и да бисте разговарали о томе како се Хадооп увелико разликује од Линука или СОА-е и зашто његова будућност остаје у великој мери неписана.

Проблеми са паковањем

Ствар у вези са Хадооп-ом, сама по себи, је та што то није спаковано решење ни на који начин. Уместо тога, то је сложена колекција модула која омогућава програмерима високог квалитета да искористе огромне алгоритме паралелне обраде да раде врло специфичне ствари. Али нема корисничког интерфејса, а упутства су брутална.

Додајте том изазову ову критичну препреку: потребни су вам и пословни људи који имају барем опште разумевање о томе шта могу да ураде. Ти људи морају бити у могућности да дочарају идеје о томе како се може користити, а затим пренети програмерима, који морају да производе, тестирају, имплементирају и подржавају апликације.

Оркестрирање овог плеса чини начин на који Цлоудера и Хортонворкс зарађују велик дио свог новца. Проблем је што је већина решења створена овом методом јединствена и обично се фокусирају на оперативне системе, за разлику од аналитичких. Превод? Такве ствари се заиста не поклањају упакованим софтверским производима.

Профитабилност амбалаже!

Што нас враћа у Орацле. Ларри Еллисон и дечки зарађују сено продајећи базу података, хардвера, услуга и (чекајте …) упакованог софтвера. Цлоудера је то очигледно схватио, отуда и њихова фокусираност на Импала. Али Хортонворкс?

Чини се да њихов модел више подсећа на РедХат, људе који су преко Линук оперативног система изградили посао вредан милијарду долара. Нари, главни добављач у пословној индустрији софтвера, не пише за Линук, ОС у којем је ИБМ на челу прешао Мицрософт. Али Хадооп није Линук, не тако дуго.

Др Геоффреи Малафски, бивши нанотехнолог америчке морнарице, а сада научник података са Пхасиц Системс и ПСИКОРС Институте, дестилује Хадооп вредност овако:

"Хадооп је одличан за претраживање, веома велика анализа трендова за стохастичке резултате и вероватно нека врло јефтина паметна паралелна обрада ствари као што је радила моја бивша супруга: квантно механичко таласијско рачунање чврстог стања и хемијских реакција. Ова стварна наука се ослања на суперрачунарима и помало је прешао у паралелну обраду, али то је тешко променити приступ програмирању. Млади, паметни, енергични дипломирани студенти ће бити ти који ће ово остварити. Сумњам да стипендије за истраживање почињу да иду у овом смеру за неке моћне рачунске рачуне апликације. "

Примјетићете да то не звучи попут складиштења података, пословне интелигенције, интеграције података или чак великих података. Звучи као супер рачунарство. Из неког занимљивог разлога, свети рачунарских перформанси и пословне интелигенције високих перформанси се никада нису сукобили или спојили на било који смислен начин.

Дуги пут пред Хортонворксом и Цлоудером

А ево заиста лоших вести за Хортонворкс и вероватно за Цлоудеру. Велики добављачи попут ИБМ-а и САП-а, Орацле-а и Терадата - благо речено, и цитирају Дире Страитс-а: "Они момци нису глупи!" Пре три и више година сви су развили озбиљне Хадооп стратегије.

Централни у тим плановима су врсте ствари које пословни корисници очекују: графичка корисничка сучеља, функционалност превлачења и падања, алати за моделирање и откривање, радни ток, управљање, сигурност; укратко, сви комади и комади који чине корпоративни софтвер употребљивим. И наравно, ови велики добављачи имају масивне базе за инсталирање.

Да будемо сигурни, Цлоудера и Хортонворкс обојица су добро пословали, али само мали део онога што главни играчи добијају сваке године. Направите математику о томе колико изазивачи наплаћују својим купцима, у поређењу са тим колико је њихов рејв вероватно, а слика није тако ружичаста. Одузимање, то је у складу за курс с софтверским проблемима у раној фази, али ипак …

Будућност Хадоопа?

Дакле, можемо ли видети класични вал аквизиција, какав смо имали у авионима, када је ИБМ купио Цогнос, Орацле добио Хиперион, а САП нашао БусинессОбјецтс? Можда, али нова деца у овом блоку немају Хадооп; само су га позајмили. И колико обећавају ИАРН и Тез, изгледа да циклуси пуштања заостају за оним што производе тешки хитови.

Пре неки дан, инсајер из индустрије прокоментарисао је да политика у Апацхеу може бити озбиљно грло. Ово није страшно изненађујуће, посебно ако узмете у обзир доларе - постоји велика мотивација иноватора да их обогате. И да ли је неко приметио како изгледа да је Цхроме у последње време надмашио Фирефок у својој функционалности и оперативности? Затворени извор, било ко?

Једно је сигурно: ова игра ће се одиграти на занимљиве начине. Да, сисари (читајте: мали добављачи) често могу надвладати диносаурусе; али широм света још увек постоје алигатори и крокодили; и ако наиђете на једнога ненадано, можда ћете само открити колико ти зуби могу бити оштри. Неколико крокова заједно чак може срушити слона или два.