Кућа У вестима Излагање диференцијације: стиже нова ера скалабилне инфраструктуре

Излагање диференцијације: стиже нова ера скалабилне инфраструктуре

Anonim

Аутор особља Тецхопедиа, 11. маја 2016

Извлачење: Домаћин Ребецца Јозвиак разговара о напретку у архитектури и похрани база података са Дез Бланцхфиелд-ом, Робин Блоор-ом и Брианом Булковски-јем.

Тренутно нисте пријављени. Пријавите се или пријавите да бисте видели видео.

Ребецца Јозвиак: Даме и господо, поздрављени и добродошли у Хот Тецхнологиес 2016. Данас смо „Излажући диференцијацију: стиже нова ера скалабилне инфраструктуре.“ Данас улазим у Ериц Каванагх. Ја сам Ребецца Јозвиак, ваша скромна домаћиница из групе одбора док је Ериц одлазио на Јамајку. Добро за њега.

Дакле, као што је деценијама, и ова је година врућа, мада се, сигурно, технологија креће темпом који надмашује Моореов закон, а шта организације раде да би то одржале? Они траже све што је брзо, и подсетио бих, вероватно је једна од најважнијих ствари када размишљамо о базама података. И наравно, имамо опције уобичајеног релацијског, сада имамо свој НоСКЛ, имамо своју продавницу ступаца, имамо наше базе података графикона, наше РДФ базе података, али заиста, оно што компаније траже је обим, паралелизам је и брз .

Сада су традиционалне архитектуре на неки начин засноване на том релацијском моделу. Али ако погледате већину веб послова који су се појавили у последње три, пет, десет година, то нису модели које користе за своју инфраструктуру. Они користе другачију, паралелну архитектуру, скалирају и брзо раде, и то је оно чему се данас многи људи обраћају.

Наш састав, имамо Дез Бланцхфиелд, он је научник из Блоор Гроуп. Имамо доктора Робина Блоора, нашег главног аналитичара из Блоор Гроуп, и Бриана Булковског, ЦТО-а и оснивача у Аероспике-у. Дакле, момци с тим, предаћу га Дез.

Дез Бланцхфиелд: Хвала и хвала што сте ме довели овде. Покушаћу да поставим сцену за то како смо некако врло брзо стигли до места на коме се налазимо, а ми ћемо уронити у пуно више техничких детаља док пролазимо кроз данашње теме. Само ћу преузети контролу над екраном.

Тако веће, боље и брже. Када размишљам о томе где се налазимо, слика која мени лично пада на памет је управо та слика коју имам на свом насловном дијапозитиву, а то је ширење универзума. Технологију смо развијали и развијали већ деценијама, заправо од касних педесетих када је маинфраме постао права ствар. Технологија је наставила да расте у многим случајевима горе или веће од линеарне кривуље, зависно од тога на ком се делу криве налазите, колико иде софтвер или хардвер.

Опсег је постајао све већи и већи, све бржи и бржи, што се тиче онога што покушавамо да испоручимо, и све мањих и мањих на нивоу производње и полуводича. А у средини су софтвер и апликације и системи који подржавају тај софтвер, и они имају тенденцију да постају све мањи и мањи у природи, а видели смо ствари попут контејнерских апликација и микро сервера, то је поново постала ствар. То смо радили у прошлости, деценијама раније, али као резултат тога да тамо идемо све мањи и мањи, постајемо све већи и већи у обиму који сада можемо покренути ствари, попут апликација и одређених база података, и логике те базе података.

Имам ово гледиште где смо се скалирали врло водоравно, у суштини оси Кс; вертикално смо скалирали у оси И. Налазимо се сада на месту где требамо ићи негде другачије, и по мом мишљењу то је ментално замишљено као З оса, а то је да морамо дубоко ући у технологију и погледати како можемо ствари другачије од онога што смо до сада радили, како бисмо постигли тај додатни дио брзине. Тако да визуелно представљам целокупно ширење свемира, где се догодила експлозија, и неке технологије постоје, и то бољи линеарни раст и потражња. Морали смо да пронађемо различите начине да постигнемо што већи, бољи и бржи резултат.

Само да брзо покријемо врсту где се тренутно налазимо у неколико хардверских окружења. Видели смо како падајући трошкови гигабајта простора на диску доносе неколико прилично великих прелазака и технологије, и приступа већем, бољем и бржем проблему. Ово су два одвојена графикона која покривају отприлике деценију по комаду, нешто више од деценије од сваке цене пада једног гигабајта простора на тврдом диску.

То је класична Ј кривуља или хокејашки штап, како их често називамо, по томе што сте пре неких две деценије могли да потрошите буквално стотине хиљада долара за куповину гигабајта простора на диску, док данас то постају долари и на крају сам сигуран да ће завршити, оно што означимо трком до нуле, постаће центи. То је довело до занимљиве промене у врсти ствари коју предузећа могу да ураде. И на то мислим посебно као на поремећај података или великих података, а под тим мислим на то што смо видели технологије, попут тога како постати ствар на којој бисмо могли хоризонтално да размештамо у складишту и врсту израчуна може се применити на ту меморију и како отвара занимљиву технологију јер нам омогућава да направимо веома велику, сувишну паралелну меморију на најбржем нивоу, а Хадооп делове саме по себи, матично способни да копирају податке у запису једном прочитани више пута, и само разместите ствар готово линеарном оценом.

И све компаније попут ове праве се поремећајима користећи велике податке. Имамо компаније попут Убера која су највећа такси компанија на свету. Они заправо не посједују никакве таксије, а овдје је дугачак списак. Аирбнб је највећи пружатељ смјештаја, заправо нема некретнину. Један од мојих фаворита је Фацебоок, на пример на овој листи, где они заправо не стварају садржај, ми га стварамо за њих, али они су заправо највећи власник медија на планети. Имамо занимљиве попут банака које се најбрже расту, а заправо немају новца. То су платне платформе и банке (пеер-то-пеер), а посебно у Аустралији растућа слава која се зове СоциетиОне. А неке од главних банака које морају да имају новац улажу у ту одређену равноправну банку. И пролазимо кроз ову листу чак до Нетфлика; они заправо не поседују ниједан биоскоп, а ипак су заправо највећа кино кућа на планети.

Тако смо, по мом мишљењу, дошли до места где су били, применом паметних технологија на нивоу података, јер смо могли да извршимо већу и ширу меморију са нижим трошковима због пада цене гигабајта простора на чврстом диску, а могли смо и примените неки интелигентни рачунар и распоредите рачунски модел преко тога. Те компаније су имале могућност да створе конкурентску предност и поремете резултат ових падајућих трошкова дисковног простора.

Видели смо да се слична ствар дешава и по цени памћења. Пре неколико деценија, ако сте летели око шест милиона долара, могли бисте купити гигабајт РАМ-а, а имали смо врло сличну Ј кривуљу или хокејски штап, који ће се догодити у смањењу трошкова или падајуће цене РАМ. И то је довело до неких занимљивих ствари, а по мом мишљењу, један од највећих поремећаја у том простору је количина меморије која се може уградити у уређаје, попут мобилних уређаја, попут телефона и таблета, па чак и лаптоп рачунара. Рачунари ових дана, количина меморије која улази у просечни лаптоп је у неким случајевима прилично смешна. У неким случајевима мој тренутни лаптоп има више меморије од неких сервера које су користили не тако давно.

Ово је довело до значајних промена у самом себи, на сличан начин на који РАМ има у мом уму, и дозволио нам је да брзо и брзо мењамо. И сада смо се појавили технологијом коју називамо фласх, а то је технологија која првобитно потиче од нечега што је смештено на хардверу у облику ЕЕПРОМ-а, малог чипа који је дизајниран тако да може бити доступан, и пишите, а онда кад би се искључила струја, све што сте написали том чипу остаће као упорно складиштење. Било је споро, пркосно и у оне дане, мислим да је то било око 1980-1981. Године је некако постала ствар. До 1984. године, Тосхиба за коју верујем да је изумио технологију, учинио ју је комерцијалном ствари коју бисмо могли користити.

Али пре неког времена, људи су схватили да би заправо могли узети комбинацију компоненти које су коришћене за стварање овог концепта ЕЕПРОМ-а, меморије која је само за читање, након што га је избрисала и написала у њега и заправо су могли да му напишу и редовно га користите мало више као простор на диску и мало више као РАМ. Временом се развио. Сада је ова технологија за складиштење блица спојена између традиционалног диска, било да се ради о предењеном диску или у неким случајевима хибридног диска меморије, и РАМ-а. А кључна ствар је систем између јер можете да га читате и пишете, а затим искључите напајање и он ће задржати оно што сте му написали. Дакле, простор на диску, очигледно му пишете, искључујете напајање, а предење вретена и јако модификовани, у жељи за бољим описом, задржавају нулте и оне које сте написали на њему.

У меморији са случајним приступом нешто напишете у меморију у РАМ-у, искључите рачунар и све се обрише јер нема више електрона који би га напунили и задржали информације које сте му написали. Плус је у средини и изузетно је брз, бржи од диска, тад спорији од РАМ-а. Али можете да му пишете и читате са њега, а кад искључите напајање, оно ће и даље постојати. Ово је довело до невероватних технологија, а посебно смо развили мобилне уређаје и лаптопове који су стварно, стварно брзи и способни да раде много ствари, а сада је премештен у инфраструктурни простор око складиштења и рачунања, и то је довело до значајног промене у ономе што можемо донети у обиму. Овде верујем да сада долази до оси З у мојим мислима.

То је скоро право време на много начина, јер смо сада видели поремећај кроз оно што ја називам потражњом, а то је да потрошачи имају, без обзира на то шта се дешава у инфраструктури и технолошком простору, и способност брже вожње и брже рачунање и перформансе на нивоу инфраструктуре, потрошачи захтевају ово ометање у виду онога што се сада односи, искуства славних. Сви желе да сваки систем, свака апликација, свака веб локација знају ко су и шта воле, и да им могу пружити персонализовано искуство један на један. Више није довољно само да одем на веб страницу на којој купујем биоскопске карте. Желим да знам шта сам купио раније, зашто сам га купио и потенцијално оно што су људи попут мене купили и препоручивали ствари.

Неизбежно је да видимо оно што ја мислим да је споредни друштвени поредак, а то је да желим искуство познатих, али желим и да социјализујем ту идеју, желим да је поделим са свим својим пријатељима и кажем им шта ја Радим, а исто тако желим да знам шта моји пријатељи раде. А то је резултат експлозивне потражње за додатним рачунањем и складиштењем, и брзог преокрета ствари. Видели смо Фитбит генерацију, како ја зовем увек праћење. Све што радим се негде прати и бележи, и негде заробљава. Видели смо у стварном времену све: банкарство, надметање, препоруке, могућност да се могу носити са стварним стварима које ја лично радим као потрошач.

И тада видимо врло велики утицај, попут безбедносних ризика око сајбер-безбедности. Некада смо имали појединачне хакере, онда смо криминалне банде примењивали на то, сада имамо читаве нације које ће ратовати преко интернета, што се стварно и заиста догађа. Обратите пажњу на то, седите и погледајте ово, јер на то постоји стварни утицај, а неки од наших предстечајних ревија били су око разговора о ризику продора вашег рачунара или барем мреже.

Видјели смо овај концепт вађења ентитета. Извлачење ентитета је када морамо пронаћи ствари које су занимљиве у веома великим скуповима података, посебно око превара, илегалних и хакерских активности. Али чешће него не, видећемо да вађење ентитета постаје фокус тачке добрих ствари и ствари које су нам вредне, за разлику од тражења ствари које нас нападају.

Такође смо видели експлозију која се назива и геопросторним подацима. Ово су подаци који заправо знају одакле потичу или одакле су други подаци. Можете замислити да стојите на улици и желите да пронађете најближу паркинг станицу или најближи ресторан, апликације које могу примењивати геопросторно рачунање и податке, рачунајући на податке, који знају где се налази у простору, врло је важно јер морате бити у стању да знате где су други објекти и ентитети и то брзо.

Видели смо трајно повезан мобилни телефон. Чак и када ноћу одлазимо спавати, наши мобилни телефони још увек откуцавају, ажурирамо своју е-пошту, проверавамо наше календаре, гледамо какво је време и схватамо да ли ће нам бити доступно оно што бисмо волели за доручак. Тамо се дешава много буке и то је створило масиван утицај на оно што треба да радимо на задњем крају и колико брзо то радимо.

Све у свему, чиста разина и утицај онога што се назива Интернетом ствари или, чешће него не, повезаност машина-машина, где уређаји разговарају са уређајима и иде све до мотора привезаних за страна авиона која говори самом авиону или систему за управљање авионом, да у односу на мотор број четири долази до прекомерног хабања и топлоте, и треба га заменити када слећемо, а затим комуницира са другом машином, и тако треба поставити наручи, а магично се инжењер појави на лету на аеродрому и спреман је да га замени током точења горива.

А скала је толико велика и тако велика да смо морали да уђемо у оно на шта се ја позивам, кроз приступ да бисмо се некако носили са тим. Јер нови свет и добродошао у нови свет, нови свет свега што користимо је повезано; некада су то били сателити и мрежни уређаји, сада су то мобилни уређаји и наши лаптопи и таблети и телефони, па чак и мој потпуно нови Ауди има уграђен знак и стално извештава о свом здрављу, али се такође ажурира, и зна где се налази и које су мапе примењиве, па ми чак каже и када треба да кренем другом рутом ако је саобраћај на путу испред.

Све што сада градимо, све што сада причамо са вама, дизајнирано је за повезивање и повезивање са другим стварима, не само од мене до система, већ од система до система, и да бисмо се могли носити с тим ми мораћемо да применимо веома различита размишљања на нивоу инфраструктуре, како на хардверу, тако и на софтверу, а посебно на слојевима база података које системи требају да подрже ово, а на много начина база података је постала мотор, а апликације су заиста само мали ботови који раде ствари.

Овде ћу се брзо завршити са овим помало шаљивим погледом око тога где идемо са тим стварима, и оно што ја називам „ИоТ притиском на дугме“. Створен је нови гадгет који се зове Амазон Дасх дугме, а ово је мали додатак величине палца. У ствари, на исти начин је исто као и мој УСБ палац. Када купите ову ствар, она износи око 4, 99 америчких долара путем Интернета од Амазона, она вам се испоручује, конфигуришете је помоћу мобилног телефона и буквално је само прикључите на један од својих уређаја, као што је фрижидер или машина за веш или било шта друго. У примјеру ваше машине за прање рубља, ако вам на крају понестане праха за прање рубља, можете притиснути тај гумб и он ће назвати дом и аутоматски наручити више за вас, а чаробно ће вам их бити испоручено путем наших добрих пријатеља у Амазону.

За мене ме то плаши, јер ће се видети експлозија више ствари које су повезане у мрежи и покушавају да створе повезивање и генеришу потражњу. Ако можете да замислите, једна или две ове ствари можда и нису тако застрашујуће, али последњи пут кад сам погледао било је преко 110 таквих брендираних ствари, тако да ће скоро сваки бренд на планети покушати да добије свој мали гурач - дугме ИоТ, да идете кући и притиснете дугме и на њему пише: „Наручите ми пиззу.“ Притиснете други тастер и он сутра нареди припремљени ручак за вашу децу за школу.

То покреће тако масивну потражњу за трансформацијом на задњем крају, на нивоу апликације, посебно на нивоу базе података, мислим да смо само видели врх леденог брега врсте трансформације перформанси коју требамо видети . А уз то ћу га предати и доктору Робину Блоору, а ја ћу сазнати где смо и ми.

Ребецца Јозвиак: Ок Робин, пренео сам ти лопту.

Робин Блоор: Није ли то добро? У реду, ево ме. Видио сам Дезову презентацију прије него што сам дошао на ову, па бих рекао ствари које су бесплатне, а не само да понављам неке ствари које је Дез рекао. Мислио сам да ћу говорити о еволуцији базе података у погледу онога што се заправо догодило с архитектуром, и тако даље, тако и са базама података из историјске перспективе.

Основни проблем који има било који добављач базе података је одржавање флексибилне архитектуре која скалира и иде у корак са развојем хардвера. Разговараћу о томе тако, али кад се заправо осврнете и видите начин на који су некада грађене базе података и начин на који су изграђене, они се у ствари значајно разликују од онога што бих назвао нивоом архитектонског дизајна . Вриједи само прегледати зашто је то тако, или бар мислим да је то тако. Хардверски фактори, а Дез нам је пружио посебно добар пропуст нижих слојева у погледу меморије и диска. Оно што сада имамо, а то је будућност која долази, Интел је следећи, ЦП који ће имати ФПГА на њему. Шта ће људи са тим радити, немам појма. АМД спаја ЦПУ и ГПУ и шта ће та разлика направити? Ово су врсте промена које ће заправо утицати на базу података, а сумњам да ће Аероспике између осталог, јер Аероспике покреће перформансе, вероватно већ гледати то и радити тамо где мисли да ће заправо ићи са начином на који производ делује.

Имамо систем на чипу који се још није скинуо. ССД-ови о којима знамо, али поента је да они заправо повећавају брзину, отприлике стопу Мооре-овог закона, фактор 10 на сваких шест година. Али Интел ће избацити 3Д унакрсну тачку, за коју тврди да може ићи више стотина пута брже од ССД-ова, уствари, нека врста капи у смешу, а то ће променити брзину којом производи попут Аероспике-а могу заправо иди.

Затим имамо паралелне хардверске архитектуре, другим речима начин на који смо конструисали хардвер у смислу - у почетку је то био само ЦПУ који је седео над меморијом, који је седео преко диска, али постаје много компликованији од тога. Идеја система на чипу је да заправо можете имати паралелизам да се чип чип и да све иде изванредном брзином, а ми немамо појма који ће од тих производа заправо доминирати.

То је само поглед у будућност, али на нивоу хардвера перформансе убрзавају и трошкови и даље опадају, некако онако како је Дез описао. Ваши ЦПУ-и не морају нужно да појефтине, већ постају бржи и тако даље.

Из пословне перспективе, у неким ситуацијама, а то су тржишне ситуације, прво је место где послује вредност. Ако посебно - ако сте апсолутно уверени да ће одређена акција пасти на цену, прва особа која добије налог за продају добије најбољу цену. Заиста је тако једноставно. Стога постоји технолошка трка која се наставља на аутоматизовано трговање у банкама да би се те ситуације заиста покушале и победити. Шта се догодило након тога? Шта се дешава након што банке раде са свим тим? Одједном почињете да видите друга подручја како се заразе истом врстом потреба за брзином.

Стварно оно што се догађало јесу ли људска бића уклоњена из једнаџбе и то се врло брзо догодило интернет оглашавањем. Али ствар је била у томе да то није специфична трансакција, извршење метода, ово је читав пословни процес, чињеница је да је веб страница тек одбачена и треба донети одлуку која може бити прилично компликована одлука, у вези са тим који ће се оглас ставити на тој веб страници, рачунајући од онога ко је корисник прегледача, шта би био најприкладнији оглас за његово постављање, и тако даље, и тако даље. То је постала врло сложена ствар, и поменућу то још једном.

Али поента је да перформансе и скалабилност пословног процеса није исти проблем као перформансе и скалабилност могућности упита, и то је нешто што сам добро свестан, због недавног упутства за састанке са Аероспикеом да су такође смо свесни. Још једна ствар, када заправо радите овим брзинама, својства имовине су важна за трансакцију, било коју обраду догађаја. Они су заиста, заиста важни. Тако да грозно пуно онога што неке базе података раде, а то је губитак слова или два од имовине, може функционисати разумно у контексту - ово ће функционисати добро у контексту о којем говоримо. Искрено, није прихватљиво.

Са технолошке перспективе, ви заправо гледате - знам да постоје две врсте полуга, како би се створиле врсте архитектура које су заправо потребне да дају брзину којом се, попут Аероспике-а, може извршити милион трансакција у секунди Морате бити веома прецизни у погледу развоја софтвера. Не можеш се само пробити. Морате бити забринути због дужине путање кодова. Морате да се одлично искористите у меморији и заправо оптимизирате читаве трансакције. Потребан вам је интелигентни паралелизам, а потребан вам је и безбедан паралелизам. Морате да повећате скалирање, а не да га скалирате, јер чим укључите мрежу у било шта, она постаје највероватнији показивач на који ћете погодити кашњење и почеће да трансакције буду превише спора.

Морате да стигнете што је могуће више о било којој датој мрежи која је позната пре него што је стварно размножите, а стварно не желите да брзо размножите, заиста не желите много процеса. Желите мрежу коју нико други не користи. И желите да имате невероватно брзу мрежу.

Убрзана ССД меморија је нешто - мислим да се већина тога односи на оно што Аероспике ради. Једна од занимљивих ствари је да је то НоСКЛ база података. Некада се веровало - не знам, пре неколико година - веровало се да је релациона база података једина база података и доминирала је у свему, а то су биле само ове чудне нишне ситуације у којима вам није била потребна ићи у релацијску. Сада је некако окренута глава. То су брзе базе података које се налазе у тим СКЛ базама података, а један од разлога за то је главни разлог тога што избегавају придруживање података, а оне прилично похрањују податке на објектни начин. Када завршите са објектом, једноставно га похраните, а затим извучете цео предмет назад, он се не спаја заједно како би их могао стварно обрадити. Ово је брзина. Те врсте техника које генерирају брзину у контексту базе података.

Ово је траг суза, то се догодило с базом података. Прича или приповест о релацијским базама података била је крај базе података заправо није била истинита. Чак и када су почели да превладавају, то је и даље било неопходно. Објектне базе података су радиле претходне трансакције у тим данима, јер их релацијске базе података заправо нису могле направити, а онда се испоставило да релацијске базе података које користе редовне продавнице, нису могле обављати ни брзе упите, потребне су вам трговине ступаца. А онда смо открили да ако заиста желите да вршите графичке упите на подацима, ни спремник ступаца нити релациона база података не би били корисни, а заправо бисте требали да имате израђену базу података која је посебно позната по графовима. Тада су се појавиле РДФ базе података, и чим сте заправо почели да разматрате значење семантике и добили смо НоСКЛ базе података, врло, врло конкретно за брзину. Назвати их НоСКЛ је готово као да брендирате све те базе података као да су исте, у ствари се радикално разликују у ономе што се налази испод. Једини разлог што они носе име НоСКЛ је тај што се не проклињу око СКЛ-а јер је прескуп. Латенције трансакције које су им потребне.

ИоТ - за који сам мислио да ћу завршити истог тренутка када га је Дез завршио - није готово, сва ова ситуација у погледу брзине и захтева кашњења, није готова док дебела дама не почне да оборите ове податке, а то још није започело. Пуно тих података ће желети да имају кашњења која сам на неки начин указивала, па мислим да је то све што морам да кажем. Предајмо га Аероспикеу и Бриану Булковском.

Бриан Булковски: Здраво, хвала пуно што сам се придружио групи Блоор и ја на данашњој презентацији. Размишљајући о ономе о чему су Дез и Робин разговарали, желео бих да вам кажем нешто о трагу који је Аероспике искористио у пружању нове технологије база података и технологије НоСКЛ база података за бројне индустрије. Био је то сјајан пут. Аероспике смо започели 2008. године видећи доста трендова које су Дез и Робин споменули. Конкретно о томе да би базе података у меморији могле да искористе флеш, као и врсту облака за скалирање скала и врсте скале потребне за персонализацију, анализу понашања и врсту ВИП искуства о славним личностима о којима се разговарало.

Када смо приступили проблему базе података која је била напредна оперативна база података која је била у стању да пружа подлоге апликацијама које би се могле написати да би се решиле ове, почели смо с проблемом како да у основи направимо дистрибутивну хасх табелу, меморију -дељена хасх табела која је била изненађујуће брза и способна за ствари попут милиона трансакција у секунди, али по повољној цени. Када смо завршили свој прототип, схватили смо да бисмо тада морали да схватимо коме ће можда требати оваква брзина. Будући да је компанија из Силицијске долине, брзо смо установили да је заиста рекламна индустрија способна да користи такве информације и била је заинтересована за њу, па бих волео да проведем секунду разговарајући о надметању у реалном времену и како ово тржиште ради.

Робин је споменуо како функционира финансијско трговање, што је прва трансакција која је често добитна трансакција, а у суштини постоји време да се тржиште латенција и вредност касне. Индустрија оглашавања је нешто другачије, на занимљив начин, јер циљ оглашавања је посебан - оно што се назива утисак, способност испоруке огласа - аукција и аукција траје између десет милисекунди до педесет милисекунди. Назив игре, а често стотине компанија које сада лицитирају у реалном времену за сваки оглас који се постави на Интернет, јесте да се добије највише количине података и доведу најбољи алгоритми који ће се поднијети у року од десет до педесет милисекунди током највећа количина података.

Ова промена и помицање се дешавало у индустрији оглашавања, у свакој од тих неколико милисекунди, временски ограничена компликација најбољих алгоритама у вези с највећом количином података, а за то обједињујете пуно малих комада података. Најновије информације о ИП адреси, недавне информације о одређеној категорији уређаја, недавне информације о понашању веб локације, недавни појмови за претраживање, све би то ушло у тајни умак одређених алгоритама компаније да одреде цену и понуду.

Ово је био фасцинантно тржиште којем треба бити део. Прво смо се запослили у Аероспике-у 2010. године са неким од првих компанија које озбиљно раде у економији лицитирања у реалном времену, а затим смо постигли, у основи то складиште података о понашању, за већину компанија у тој компанији простора. Оно што смо открили од тада, а то је посебна архитектура коју ћу детаљно објаснити током ове презентације, је да се све то догађало у 2010., 2011., 2013. и наставља да се развија. Оглашавање је веома динамично тржиште.

Али такав ВИП доживљај, можете замислити као постављање правог огласа, не стављање огласа за рецимо дечије производе, јер ја случајно немам децу, тако да нећу имати ефикасан оглас ако је постављено на то, али ако се ради о брзим аутомобилима, то је врста огласа за Брајана. То је заиста врста ВИП искуства у понудама, било да попусте или не, ако сте на малопродајном месту, чак и у откривању превара. Да ли је то уобичајен образац за одређену особу или одређену кредитну картицу? Сав тај облик технологије аналитике у стварном времену, предвиђања понашања, предиктивне аналитике сада излази из рекламне индустрије, која то већ неколико година ради у забаву и зарад, а стварно долази у малопродају и банкарство, откривање преваре итд. кроз одређену архитектуру. Тако је Аероспике имао привилегију да буде део великог броја тих случајева.

Архитектура за коју видимо да ради и која је практична за то је она где уместо да креирамо скуп упита са сервера апликација, уместо да више рачунара преместимо на сам сервер апликације, а затим да помоћу базе података у основи сачувамо складиште података мотор за врсте предмета о којима је Робин говорио. У овом случају, ове архитектуре, пре свега, не мешају ово са вашом стварном аналитиком овде. На десној страни овог слајда видите да овде још увек постоји аналитика за генерисање увида. То су послови који често раде преко петабајта, десетака петабајта података, чак и у случају неких наших великих купаца који користе разне технологије. Морате имати велики тим података, аналитички тим, квантитативни тим тамо који ће схватити шта су, рецимо, геопросторне координате важне, који модели функционишу у смислу проналажења тих односа и стварања ВИП искуства. То је читав проблем сам себи, а не проблем у којем је Аероспике директно учествовао, а постоји гомила сјајне технологије када се бавите таквим системом.

Оно што смо били узбуђени и радимо са индустријом је да након што стекнете те спознаје, како се бавите врстом трансакције машина-машина или брза машина-човек, где узимате те увиде и праве да ли су стварне за сваку особу, из тренутка у тренутак? Архитектура коју смо видели користећи је она где је записан сервер апликација који ради сву ту математику и гледа кроз моделе које сте креирали и гледајући недавна понашања и то раде у основи кључне парадигме или бар веома лаган систем упита.

Када се бавите врстама података о којима говоримо, врстама токова о којима причамо, са милионима писања у секунди, милионима читања у секунди, милионима и стотинама и хиљадама одлука по друго, изградња сложених индекса, вишедимензионалних индекса, једноставно не функционише добро, није скалабилно. Начин да се постигне ова форма скале јесте да се покрене велика паралелизма. Мало ћемо разговарати о томе како ћемо касније. Али део тога је сервер апликација без држављанства написан на вашем језику.

Оно што често видимо је одређени пројекат који претпоставља нови оквир апликација заснован на људима који тамо раде, технологији коју користе и проблему којем приступају. Видели смо људе који користе Питхон, пуно људи користи Јава, још увек видимо Ц програмере, јер много тога је и даље високих перформанси, можда чак и користећи ствари попут старих МАТЛАБ библиотека. И они морају да додирну хиљаде и хиљаде тачака података у секунди да би донели ефикасну одлуку.

Једно питање које сам поставио понекад је: „Па, Брајане, ако си способан за милионе трансакција у секунди, коме је то потребно?“ Ако погледате, на пример, обраду плаћања у Северној Америци, а Аероспике је укључен у решења која откривају преваре унутар тог система и подржавају програмере апликација који раде неке врло иновативне ствари у откривању превара, само неколико хиљада платних трансакција у секунди тече чак и кроз највеће платне процесоре. Ипак, када је прва компанија дошла до нас и рекла да гледају користећи НоСКЛ, и желели да виде како ће изгледати наше решење на којем се налази њихова апликација, рекли су да желе да додирну 5.000 комада података у прозору величине 750 милисекунди. Па, одједном имате неколико стотина пословних трансакција и неколико хиљада података који треба узети у обзир у сваком рачунању, а сада сте у области у којој вам требају милиони трансакција у секунди.

Случај - одустајање од оглашавања на тренутак, случај преваре је фасцинантан јер тамо где има новца, постоји превара и спречавање преваре у стварном времену, за разлику од покушаја аналитичког разврставања након што се превара догодила, заиста је важно је да на интернету донесете што више података, а то можете да мислите као одраз тог ВИП искуства. Да ли се та особа понаша на начин на који се обично не понаша? Тако се повећавају шансе да буде преварански систем, а не заправо та особа. Да ли та особа обично приступа путем одређеног уређаја или скупа уређаја, са одређеним сетом резолуција екрана? Да ли обично показују одређени образац куповине у понашању? Можда можемо преварити превару током саме трансакције. То би вас требало подсетити на врсту ствари која се дешава унутар трансакције у рекламном систему.

Врсте система које решавамо су они у којима сваки појединачни процесор плаћања има велики тим података, имају много историјских података, стварају нове моделе, не дијеле са нама на Аероспике-у све моделе, јер они заиста сам тајни сос. Ако сте претплатник на Гартнер и чули сте Гартнер како говори о економији алгоритама, ово је један алгоритам и једна компанија која се бори против главе како би смањила превару и повећала број успешних трансакција, јер такође не не желим да блокирам трансакције. То је врста пројеката које тражимо у Аероспике-у на овим нивоима размера.

Други случај на којем радимо са компанијама за финансијске услуге је оно што се назива Интрадаи систем евиденције. У овом случају, оно што се догађа је врста богатијег искуства, чак и у систему трговине на мало, оно где желим да могу да сагледам свој одређени положај и желим да то учиним изузетно прецизно. Не желим ухватити испред свог ДБ2 система. Уместо тога, желим да погледам тачне податке, и између мобилних, али и ствари попут поновног израчунавања ризика, прерачунавање ризика сада би требало да се врши из минута у минуту, желите да будете у могућности да прерачунате ризик сваког, као и глобални ризик, системски ризик током целе компаније у року од неколико минута.

И опет, то је исти проблем. Сваки појединачни налог који је посебан, сматрајте то кључним проналажењем вредности одређеног објекта, тада се то може обавити паралелно, и што је најважније, ова парадигма вам омогућава да пишете свој код и своје алгоритме на језику високог нивоа, што је лакше уклањање грешака и брже време за тржиште. У овој економији алгоритама морам сада бити у могућности да своје алгоритме повежем на мрежи. Ово је веома различит проблем за моделирање и пословни однос, у чему су релацијски системи сјајни. Када имате табелу делова, а ти делови су повезани са налозима, а ти налози су повезани са људима, имате пословни процес који се може строго моделирати и вероватно се неће променити током целог вашег пословања. Међутим, нови алгоритам за проналажење новог обрасца преваре мора бити написан тачно и брзо, и постаните онлине, доношење пословних одлука у року од неколико дана, ако не и брже. НоСКЛ решење за овакав систем записа заиста је невероватан систем за ове момке, јер им омогућава да брзо гутају податке, као и да граде нове алгоритме, тако да није само ново корисничко искуство у адресирању мобилних, већ заиста изградња широког спектра нових апликација.

Оно што у Аероспикеу видимо дугорочно је чињеница да сваки тип базе података, сваки физички изглед података на диску имају своје компоненте, а у Аероспике-у смо заиста фокусирани на ову кључну вредност или систем оријентисан на улогу, како је рекао Робин, са високом трансакцијском конзистентношћу и стварно омогућавају људима попут продавница колона и података са великим количинама података, као и хардцоре трансакционе системе који су такође имали ограничења у извештавању. Видимо да се сви требају увести у разне моторе за упите. Видимо неке моторе за упите засноване на ЈСОН-у. Видимо ствари попут еластичног претраживања, видимо Спарк, коме су потребне различите сорте у различито време као што су продавнице ступаца, као и продавнице редова, у чему Аероспике успева.

Заиста видимо да ће ове различите врсте и индустрија стићи до тачке у којој ће избор најбољег од сваке од њих постати неопходан. Нажалост, због реалности дугорочне аналитике и скупих послова стихова аналитике и оперативних ограничења, вероватно нећемо доћи до тачке да имамо јединствену, једна величина одговара свима, али доћи ћемо до тачке да можемо да бисте јасно изабрали неке од основних изгледа података.

Разговарајмо на тренутак о иновацији блица. И даље се постављам питање, иако је, како је раније коментарисано, бљесак већ дуго с нама. Када смо покренули Аероспике 2009. године, верујем да је 2009. можда, да, 2009. била година када је Интел изашао са Кс25, који је заиста био први САТА флеш уређај са масовним тржиштем, а пре тога било је бројних флеш система, али заиста је то био тај који је провалио у свест технологије. Фусион-ио је стварно донио бљесак на ширем тржишту подузећа након тога.

Оно што се сада дешава је појава система који се зове НВМе. НВМе је стандард сличан САТА или САС или чак СЦСИ који омогућава различитим добављачима картица интеракцију са управљачким програмима унутар оперативног система уз висок ниво ефикасности. Дакле, ствара већи ниво перформанси, пре свега зато што се НВМе темељи на ПЦИЕ као његовом основном транспорту, који је много бржи од САТА, САС или било чега другог, али такође омогућава возачима најбоље расе.

На пример, у Линуку је овај момак Јенс, а Јенс је НВМе водич за возаче, Јенс екпо, и он ради бољи посао од било којег појединачног, што би Интел или Фусион-ио могао да ураде са својим појединачним управљачким програмом, са свим својим ресурсима. Када имате моћ самог оперативног система да буде у стању да изгради најбољег покретачког програма, видимо неке заиста невероватне нивое перформанси. Ово све поткрепљује идеју да блиц заиста може да пружи пуно малог кашњења РАМ-а.

Сада, Аероспике је и даље сјајна база података РАМ-а због свог модела кластера, међутим, открили смо да када радите мрежни скок, за који требате да имате скалабилну меморију, већ трошите најмање пет до 50 микросекунди, додатних 70 микросекунди НАНД-а обично не представља препреку и можда бисте користили и блиц, с обзиром да НАНД блиц има, с обзиром да је мрежа већ укључена у то. Многи се људи тада питају како - ово све звучи сјајно ако купујете сопствени хардвер, како раде јавни облаци? Мислим да ћете одмах пронаћи, без обзира који јавни облак користите, ти јавни облаци имају веома јаку флеш понуду. То се мало разликује од провајдера облака до провајдера облака. Амазон има своје И2 примере који су нестали током године, две године, који су заиста прилично квалитетни уређаји за блиц, а Аероспике на себи има образац примене.

Желео бих посебно да истакнем Гоогле Цомпуте, Гоогле Цомпуте Енгине, Гоогле Цлоуд, јер по нашем искуству они до сада имају неке од уређаја са најбољим перформансама и неке од најфлексибилнијих у погледу образаца примене. Али такође видите нове обрасце размештања као што је Пивотал, који је врста јавне / приватне, тако да можете добро да направите Пивотал апликације на оба места која подржавају блиц и подржавају различите уређаје за складиштење, као и Доцкер обрасце. Дакле, ово је тачка у историји у којој вам блиц није доступан само за куповину и стављање у ваше податковне центре, већ је заиста потонуо код свих пружаоца инфраструктуре, јер је заиста најбољи начин да набавите системе високог ИОПС-а на врло разумна кашњења.

Само један тренутак о Аероспику - Аероспике је база података која се дистрибуира кластерима, што га чини врло погодним за размештање у облаку као и за центре података. Откривамо да је флексибилност могућности додавања више података и више перформанси апсолутно неопходна у оваквим новим мрежним апликацијама, јер покрећете пројекат, не знате да ли вам је потребно педесет хиљада трансакција у секунди, сто хиљада, милион, два милиона, тако да желите себи да омогућите додавање сервера. Па ипак, желите да повећате подручје тако да сваки сервер може бити брз сам. Заправо не желите да завршите са пет стотина или хиљаду сервера који су спори сервери база података. Сцале оут није једина игра у граду, већ се повећава и повећава, као што је Дез раније говорио, постоји нова З осовина.

Надам се да вам даје неке нове идеје о томе како се брзина и опсег баве новим тржиштима и можда постоје пројекти на којима радите где ћете моћи да размислите о стварању више богатих апликација и коришћењу апликацијског оквира с више кључа вредност или НоСКЛ база података испод њега. У Аероспикеу сам сигурно видео доста наших купаца и много наших корисника отвореног кода успева са тим обрасцем, и радујем се што ће га индустрија у већој мери усвојити.

Ребецца Јозвиак: Пуно хвала Бриан, и сигуран сам да Дез и Робин имају добра питања за вас. Робин?

Дез Бланцхфиелд: Сретан сам што сам ускочио . Робин, имаш ли питање? Иначе имам један брзи који могу да започнем.

Робин Блоор: Извини, искључио сам звук. Заронио сам унутра, али нико ме није чуо. Одмах ми је постало питање јер је ово веома софистициран скуп технолошких могућности. Што се тиче постојећих купаца које имате, каква је ескалација или стопа трансакција коју имате са неким од ових рекламних апликација? Да ли стопа трансакције и даље расте? И ако јесте, којом стопом?

Бриан Булковски: Занимљиво питање, Робин. Свака индустрија има своју криву у свакој компанији. Узмимо, рецимо, северноамеричко оглашавање, рецимо 2012. године, северноамеричка реклама је вероватно била ближа 200.000 огласа у секунди, некако стандардно унутар дана, а не моје време, и сада је ескалирало вероватно на око три до пет милиона огласа у секунди. Али онда се десила занимљива ствар. Индустрија огласа почела се бавити неким проблемима преваре, а делови индустрије који могу да блокирају превару видели су да стопе трансакција помало падају, отприлике фактор два, у оквиру неких од наших софистициранијих клијената који су могли да утврде превару. Наравно да су морали да ураде неке претраге базе података да би блокирали превару, тако да се на крају све некако завршило.

Занимљив случај употребе налази се у телекому, нисам то заиста споменуо, телеком је посматрао трансакције у порасту због наплате на основу сваког појединачног пакета који пролази преко мреже мобилних телефона. У стара времена имали смо детаљне записе о позивима и једном минуту би позив, шта знате, мало пингова прошао кроз мрежу и има ли овај тип још минут времена? Сада морамо израдити и изједначити руту на основу сваког пакета на Интернету. То је - извините у оквиру мобилне мреже, која одједном сада чини милион пакета у секунди и нешто што се изнова и изнова расте. Дакле, један случај је да свака апликација вози лепе мали 2Кс годишње. Унутар неких купаца видимо, „Али чекај, имам нову апликацију. Желим додати неку превару свом ризику. Желим додати нешто дубље искуство купца својој превари и ризику. “Сваки од њих ствара ново оптерећење на бази података.

Робин Блоор: Да, мислим да мислим да је то оно што сам наговијестио у краткој презентацији коју сам дао, да је ово - некад смо мислили да је трансакција, да неко направи нешто и можда постоји каскада догађаја и све се то забиљежи, а сада пуно трансакција има огроман број претраживања, а ви сте дали неколико примера у презентацији. И зато више не извршавате трансакцију, ви заправо извршавате неку врсту апликације која у њу може имати пуно, много елемената.

Друго питање пре него што предајем Дезу - јер очигледно обележавамо тимску игру - друго питање на које бих желео да одговорите ако на њега имате разуман одговор је и Дез и очекујем да ће Интернет Ствари или Интернет свега како се понекад назива, стварају прилично драматичну количину трансакцијског промета. Можете ли разговарати с тим? Да ли је то ваше искуство, да ли имате купце који вам се јављају са том одређеном врстом проблема и шта мислите о томе у овом тренутку?

Бриан Булковски: Наравно, мислим да постоји мала конфузија и, најблаже речено, што се тиче интернета ствари. Купци које видим до сада једноставно доводе интернет до ствари које имају. Размислите о тим Амазоновим дугмићима - све је то Амазон - ти тастери, не можете их променити и натерати их да иду на Валмарт на мрежи. Није попут прегледача који све можете мешати и слагати. С друге стране, догађа се машина-машина, а када прикључите свој Теслин аутомобил да бисте га напунили, Тесла шаље огроман проток информација, сваки појединачни сензор у аутомобил, али он се улива у Теслин рачунар на анализу и побољшава квалитета. Оно што ја видим је све та машина до машине и сви сензори унутар поједине компаније, што ствара нове захтеве.

Данас углавном то се улива у ове аналитичке системе, и узмите случај Тесле; Теслина прва употреба тога је, према мом разумевању, била да побољша радни век батерије, под „Које су радне температуре, која су оптерећења? Погледајмо то, осмислимо бољу батерију. "Али тада почињу размишљати, и то је све сјајно, то је нека врста дубоког аналитичког проблема који је фасцинантан, следеће је питање:„ Како да побољшам искуство у сваком тренутку ? "

Сада узмимо случај попут Нест-а где покушавате да урадите предиктивну аналитику да бисте из дана у тренутак мењали температуру куће. То је случај када почнемо да се виђамо у Аероспике-у, тамо је огромно језеро података и постоје огромни аналитички процеси, али шта ћу сада да радим? Требат ћу задржати, мислити на то као на готовину, неки дио прошле седмице, прошлог мјесеца, можда чак и информације вриједне посљедњег дана, вјероватно са задње стране јер имамо посла с једноставним сензором уређаја, и ја ћу у том тренутку радити тренутак за анализу да променим искуства. Таква Нест-искуства, за која видим случајеве коришћења Аероспике-а.

Робин Блоор: У реду, оно што сам очекивао са Интернетом ствари било је да ћете почети добијати окидаче прага и да ће почети стварати каскаде догађаја. Јесте ли видели нешто такво или то још нисте видели?

Бриан Булковски: Дез и ја - управо сам питао Дезово мишљење о томе када смо претходно разговарали. Оно што још нисам видео је врста каскаде података једне компаније који се преливају у другу компанију, да мој Самсунг фрижидер разговара са мојом ЛГ машином за прање веша, јер сам тек схватио да сам по поду пролио читаву гомилу чоколаде, такву компанију до компаније по уређају, мислим да то још чекам у погледу Интернета ствари. Мислим да постоје неки проблеми у послу и сигурности који су углавном нетехнички и на њих је потребно одговорити.

Робин Блоор: Добро, Дез?

Дез Бланцхфиелд: Заправо имам врло снажна становишта о тој последњој тачки, коју ћу само укратко унети у разговор. Мислим да често пословање и технологија мисле да заправо возе тамо одакле долази потражња, али када погледамо шта се догодило када је иПхоне постао ствар, а по мом мишљењу то је био први мобилни уређај, ако се опростиш досјетка, али уређај који би се могао носити око себе, заправо може покренути пуно малих апликација у џепу, и донио је значајну трансформацију у ономе што смо мислили о рачунару. Многи људи мисле на иПхоне или паметне телефоне или Андроид телефоне као телефоне, али нису, они су заправо само мали рачунар који покреће апликације, а једна од апликација коју покреће упућује позиве, а они нису позиви о којима више размишљамо, нису аналогни позив „точка-тачка“ као што је нагласио Бриан, они су мали пакети који се преусмеравају наоколо.

Али чешће од тога, оно што смо видели је ова побуна паметних телефона која се у ствари и не користи за упућивање позива, а вероватно 98% онога што радим на свом паметном телефону није упућивање позива. То је све осим позива, то су апликације. Мислим да овај каскадни ефекат - и желим да то брзо доведем у питање - али каскадни ефекат заправо стварају потрошачи, а у ствари имам овај један кош који често избацујем како бих добио гомилу ЦКСО-ова сједење у соби и обраћање пажње ако мислим да заспе уз презентацију коју радим, што се не надамо често.

То сам некако рекао у оном поремећају који видите у свом послу заправо не ради искључиво технологија, чешће је него да вас клијенти не возе. И они некако сједе и заправо се питају, шта он тамо значи? Дакле, када размишљам о употреби технологије, мислим да смо видели УСЕНЕТ, видели смо све ове врсте забавних ствари које се дешавају на интернету, али није много људи предвиђало друштвене и утицај исте. Сви који желе свима рећи шта им је за доручак, буку која је створила и помоћну технологију коју имамо, и наравно, рекламирање покушава да испуни стварима.

Мислим да ћемо видети каскадни ефекат до тачке у којој уређаји разговарају са уређајима, а потрошачи тек схватају шта то заправо значи и шта то може учинити. Поставили сте занимљиво питање зашто Амазоново дугме неће разговарати са Валмартом. Поставићу ово питање, шта се дешава када Валмарт добије своје дугме, а шта онда ако двадесет најбољих Амазона и Валмартса, као и остале велике дистрибутивне и малопродајне мреже, добију своје дугмад? Куда нас то води? Конкретно, моје питање са Брајаном гласиће: „Куда идемо са овом новом парадигмом перформанса? На ивици сте крварења и радите са компанијама које то раде како на нивоу физичке инфраструктуре, тако и на нивоу преноса података. Куда нас то води, када дође следећи велики талас? Какву врсту увида можете поделити око тога са оним што се догађа на задњем викенду из вашег искуства? "

Бриан Булковски: Наравно, начин на који размишљам о многим стварима је фокусирање на корисничка искуства и тачно оно што сте рекли, то су корисници који покрећу, мада бисмо, као технолози и као пословни људи, могли смислити паметна идеја за коју мислимо да се корисницима свиђају, па ћу се некако вратити на пример Нест. Кад је моја сестра поставила Нест у својој кући, рекла је: "Моја кућа је мирнија, могу да чујем ствари. Чак нисам ни то што мање плаћам струју ", јесте, али ти сада Нест не можеш да отргнеш из руку, јер воли да се налази у мирнијој кући за разлику од куће у којој грејање максимално гори. а затим се искључите.

Питање се на крају поставља, која су корисничка искуства која можемо оснажити? То се завршава таквим искуством квалитета живота да бисмо, ако имамо новац и који смо у првом свету, платили много. Даћу вам пример из моје куће, моја девојка воли хладно млеко. Воли заиста хладно млеко, па често морамо покушати да утврдимо где ће у фрижидеру бити довољно хладно, а остале ствари не прегревати. Па, ово је сјајно - и рекао сам својој девојци, „Да ли бисте плаћали 10 долара месечно хладним млеком и да нисте имали смрзнуте нарезке?“ Она је рекла: „Апсолутно.“ И добијала 10 УСД месечно од било ког потрошача је тешко.

Мислим да у тим искуствима заиста морамо водити рачуна о томе шта је то искуство крајњег потрошача које би се заиста могло покренути. Мислим да је то била тајна иПхонеа. Мислим да је део тајне Теслине конструкције бољег аутомобила са свим подацима, укидајући идеју о производном циклусу и годишњем издању и непрекидним унапређивањима на свим деловима. Мораћемо да смислимо неке паметне идеје о томе како заправо искористити све ове податке на начин који је тренутак по тренутак убедљив у живот људи.

Дез Бланцхфиелд: Да, то је сјајан увид. Водећи се од тога, другим крајем спектра, који управо одјекује са оним што видимо сада са оним што потрошачи траже, а сви ми имамо нешто у кући што нам је хладно од овога и топло од тога. Други крај спектра је тада, и то смо видели у традиционалном „свету великих података“ где додељивање података постаје ређе од кокошјих зуба, а они који се нуде на тржишту нуде се више него што зарађују ЦИО-и. у неким случајевима, врсте фирми са којима радите и врсте развоја које сте видели, да ли је то случај да врсте програмера и тип архитектуре података и мрежни специјалци постају све теже и теже пронаћи. ? Да ли су нам потребне организације да сада почнемо размишљати о томе да пређемо пред кривуљу врсте вештина која им је потребна у позадини за програмере и архитекте података? Шта видите на том нивоу што се тиче ресурса вештина које ће разумети како ову технологију сада добро користити?

Бриан Булковски: Да, мислим да је то један од изазова са којима сам суочио организације са којима сам разговарао. Било да је то - најгори проблеми за које сам чуо заправо су нека већа предузећа, јер ако кажете: „Ја сам из ове велике банке, ја сам из Цхасеа и био сам архитекта података, “ онда сте „ На свету сте добили остриге, а зарада вам расте, тако да постоји проблем са проналажењем посла на једном од тих места, јер нема довољно људи, и могућност преласка са посла на посао. Не чујем ништа друго него такав проблем и то је заправо један од разлога зашто сам Аероспике усредсредио на коришћење алата који је погодан за одређени пројектни тим.

Уместо да покушавате да уђете у пројектни тим и кажете: "Хеј, требало би да користите наш језик упита." Погледајте, ако се ти момци ових дана возе аутобусом, момци и девојке и ако користе одређени језик упита и алата, они ће се држати тога, а ја не могу да их замишљам ни за шта друго. Мој циљ је да поставим врсту Аероспике снаге као базе података иза било којег алата који користе и то је део ове идеје, слајдова о будућности Полиглот базе података. Морам да подржим обрасце примене и аналитике између ових момака, јер је заиста тешко наћи људе који имају математичку позадину као и статистичке могућности за навигацију овим светом.

Дез Бланцхфиелд: Још једна занимљивост коју људи можда нису свесни, мислим да је Аероспике врло јак играч у свету отвореног кода, желим да стекнем веома брз увид у врсту шта то значи колико послу послује и шта он чини за вас. Споменули сте да сте директно радили са људима који раде ствари све до нивоа кернела унутра, тако да Линук кернел. Постоје неки велики играчи који су у овом простору, а постоје неки познати брендови које нећемо спомињати, али организација попут Аероспике-а, у вашој новијој новијој историји, искуство отвореног кода, како се то уклапа у ширу слику и које сте конкурентске предности видели?

Бриан Булковски: Сигурно, када смо прешли на опен соурце 2014. године, то смо и урадили, јер смо схватили да основној инфраструктури, попут базе података, мора бити доступан извор, треба јој се веровати и природна контра равнотежа између старог затвореног света извор, и када једном инвестирате у одређену базу података, ти момци су вам наклоњени за технолошки циклус након технолошког циклуса и мора постојати равнотежа. Морамо бити у могућности да изнесемо верзије које раде нове ствари, а можда је то у пословној верзији, морамо имати модел двоструке лиценце који има верзију отвореног кода за људе који пуштају гуме који раде непрофитни посао, као и пословну верзију која је лиценца власника и омогућава неограничен рад.

И наравно, имаћемо и највиши ниво брзине и обима, као корпоративна верзија. Ми верујемо у модел двоструке лиценце, и то је било сјајно за наш посао. Желимо да људи започну с Аероспикеом, желимо да мали пројекти пуштају гуме, супер је једноставно отићи до Амазона, покренути скрипту за потврду и Аероспике кластер покренути у року од пет минута. С друге стране, желимо да дамо више корпоративним купцима.

Дез Бланцхфиелд: Помало смо близу врха сата, па ћу се на тренутак вратити до Ребеке, али ако постоји само један линијски брод који бисте бацили тамо, нека врста савета дали бисте људима који желе да уђу у простор технологије коју сте пласирали на тржиште и како ће је усвојити, шта бисте рекли да је први корак за њих некако да се барем уситне нога и почети са гледањем како ће они добити конкурентну предност са ваше платформе?

Бриан Булковски: Наравно, део поруке овде је да постоје нивои брзине и вештине који су сада лаки. Не треба вам кластер Цассандра са хиљаду чворова да бисте постигли милионе трансакција у секунди. То можете учинити чак и у првим фазама вашег пројекта. Тако да су ствари много лакше него некада. Онда је други савет да ћете морати да смислите, баш као што кажете, математичке моделе ангажовања купаца пословних процеса који користе све ове податке, тако да је добра вест да су подаци доступни, лоша вест је да заправо морате пронаћи неке обрасце и неке убедљиве случајеве употребе.

Дез Бланцхфиелд: Да, одличан савет, па ћу се сада вратити Ребеки. Хвала вам пуно на томе, било је то сјајно мало ћаскање о технологији, ценим то.

Ребека Јозвиак: Хвала, Дез. Имам пар добрих питања од публике. Допустите да бацим овај слајд. Знам да сте разговарали о систему снимања и главним оквирима, али колико често видите апсолутно претоваревање или је репликација помирење за крај дана, врста онога што више видите?

Бриан Булковски: Оно што видимо у Аероспике-у користи базу података НоСКЛ испред система за помирење на крају дана. Треба вам тачан дан, тачан одговор. Не можете имати погрешан одговор, а то је оно што је Робин рекао о имовини подцењено, али пословни процеси око законских захтева за помирење могу се поприлично закомпликовати и деценијама технологије и деценијама закона и законске праксе око помирења. Дакле, оно што видимо код Аероспике-а, радићете своје алгоритме на топлијој бази података са више трансакција у секунди. Али из правних разлога апсолутно вам је потребан систем помирења који је прошао кроз те правне процесе. Видимо и једно и друго, видимо да је ово у основи двослојна ИТ пракса којој су изложени људи попут Андерсон Цонсултинга и Гартнера у одређеној мјери. Много тога видимо.

Ребека Јозвиак: Добро, добро. Неко је други показао интересовање за овај слајд, рекао је да је заиста занимљив и питао се можеш ли само ући у мало више упоређујући флеш и меморију.

Бриан Булковски: Наравно, дозволите ми да поново заузмем брзи бок, знам да смо близу краја времена. Па флеш је меморија - то је чипови - најчешће размишљам о РАМ-у. Дакле, РАМ има посебне карактеристике, захтева пуно снаге, врло је добар код насумичних писања и насумичних читања. Тамо где је НАНД способан за брзо насумично читање и нижу снагу, али веома је лоше код насумичних писања. Постоје неке суптилне разлике у начину на који ова два чипа делују на нивоу литографије, што ствара бројне техничке разлике.

У случају када радите аналитику и морате прескочити много података или у случају Аероспике-а где сте добили индексе, индексе је још увек добро користити у РАМ-у због паралелизма и случајног приступа. Потребан је виши ниво насумичног приступа. У Аероспике-у, међутим, помоћу тих индекса налазимо одређени објекат или комад података, то је одговарајуће место за успостављање НАНД-а, јер оно постаје нека већа трговина испод индекса. То је онда једна трансакција са уређајем за складиштење података, али и даље након што сте урадили пуно потенцијала и филтера у вашем систему индексирања.

Ребека Јозвиак: Добро, добро. И онда, знам да смо већ доста разговарали о ИоТ-у, а један од присутних коментара рекао је да је ИоТ у великој мери користан, али да ли компаније, владини субјекти и програмери сигурно расту и обезбеђују податке истом брзином, мислите ли?

Бриан Булковски: Можда Дез, да ли би хтео да ускочиш ?

Дез Бланцхфиелд: Да, срећан сам што сам скочио у то. Мислим да је одговор не. У ствари, један од мојих најдражих одбачених линија на ову тему врло, врло кратко је да мислим да је експлозија машине до машине и општи Интернет ствари, комуникација и безбедност, ризик око тога, сада смо на месту где владе не могу да буду у корак са стопом промена. А у ствари знамо да многе организације не могу пратити брзину промена. У ствари, ако то парафразирам, стопа промена данас је толико велика да организације морају да спринтају само да би одржале корак, али морају да трче у више трка. Не мислим да закон, и мислим да влада уопште, ни на државном ни на савезном нивоу, није у стању да држи корак са променама.

Сада је мој општи савет људима врста понашања и тражење опроштења касније. У прошлости је било много примера тога. Они ће достићи корак, али мислим да је сада на стварима да посао и технолошки добављачи донесу иновацију на овом простору и да осигурају да смо упознати са сигурносним ризицима или ризицима приватности и да се морамо с њима позабавити. Посебно, као што сте поменули, банке, када размишљате о томе шта је банкарска организација традиционално радила са стварима попут прања новца и познајете вашег клијента, изазов АМЛ / КИЦ, некада смо покушавали да пролазимо сваке три до пет година и испуњавању усаглашености.

Сада мислим да то треба уградити у сваку поједину трансакцију. Одувек сте били у могућности да то урадите на нивоу понуде са оглашавањем, трговањем акцијама и обвезницама и удјелом, мислим да смо на месту где вам перформансе које доносите са Аероспике платформом омогућавају да сада размишљамо о томе како донијети приватност, како увести сигурност у тај непосредни ланац одлука у стварном времену? Дакле, одговор је не, мислим да владе не држе корак. Мислим да компаније морају да буду у току, а мислим да морамо да делујемо и да касније тражимо опрост.

Бриан Булковски: Дозволите да додам још пар поена. Момци са којима имам посла, технолошке компаније којима се бавим су веома свесни да би се уверили да су на правој страни закона, и прилична дискусија је да ли је ово ПИИ, могу ли ово да користим, како сам Користим овај одређени део података? Шта је било његово провиђење и да ли је то заштићена одлука или искуство? Како да све то направим? То је добра вест. Питам се понекад о нашој дискусији као друштву око којег се крећемо, и ако је чак и наша дискусија о друштву на одговарајућем нивоу у смислу коришћења нових могућности од ИоТ-а, све до машинског учења, то је једини начин да сортирамо кроз количину података које имамо. Али добра вест је да су момци са којима сам разговарао заиста на правој страни покушаја да се понашају исправним законским одлукама које смо донели.

Ребека Јозвиак: То су заиста добри одговори вас обоје, и потпуно се слажем. Не мислим да се сигурност креће тако бржим темпом као што је развој технологије, посебно када је у питању Интернет ствари, али морам да мислим да људи дају све од себе и надам се да ћемо тамо стићи. Увек је помало тешко остати десет корака испред сајбер лопова и сајбер криминалаца, али тамо ћемо стићи.

Па људи, прошли смо осам минута према врху сата. Желео бих да се захвалим нашим гостима Брајану Булковском из компаније Аероспике и Дез Бланцхфиелд и Робин Блоор. Хвала Вам много. Увек можете пронаћи наше архиве на инсидеаналисис.цом, СлидеСхаре, ИоуТубе, имамо доста добрих веб емисија које долазе, људи, месец је био напоран. Следећег месеца ће бити напорно, зато будите праћени и надамо се да ћемо се видети следећи пут. Хвала народе, здраво.

Излагање диференцијације: стиже нова ера скалабилне инфраструктуре