П:
Које су околности довеле до пораста екосистема великих података?
А:Много је фактора који су допринели настанку данашњег екосистема великих података, али постоји општи консензус да су до великих података дошли због низа дизајна хардвера и софтвера који су једноставно дозволили да постоје велики подаци.
| Вебинар: Биг Ирон, Упознајте велике податке: Ослобађање података главног рачунара са Хадооп & Спарк Региструјте овде |
Уобичајена дефиниција великих података је сљедећа: Скупови података који су довољно велики и сложени да не могу лако поднијети ручно управљање или управљање руком. Велики скупови података често се идентификују као скупови података који се не могу уклопити у једноставну мрежу база података, јер за њихову анализу је потребан превише рада на делу сервера који обрађује податке.
Имајући то у виду, главни део онога што је створило велике податке је идеја коју познајемо као Моореов закон, или удвостручавање транзистора у кругу сваке две године, стварајући све мањи хардвер и уређаје за чување података (као и моћније микропроцесоре) . Заједно са Моореовим законом, а вероватно и због њега, рачунарна способност приступачних софтверских система се непрестано повећавала, до тачке у којој су чак и лични рачунари могли да обрађују много веће количине података, а пословни и авангардни системи су почели да могу да обрађују величине података незамисливо само неколико година пре. Лични системи су се кретали од килобајта до мегабајта, а затим и до гигабајта, у процесу транспарентном за потрошаче. Вангуард системи су се кретали од гигабајта до терабајта и петабајта, и на редослед величине попут зетабајта, на начине који су за просечног грађанина много мање транспарентни.
Још један напредак за прихватање великих података биле су промјене у начинима на који су руковаоци обрађивали скупове података. Уместо линеарне обраде помоћу конвенционалног дизајна релацијских база података, руковаоци су почели да користе алате попут Апацхе Хадооп и сродне делове управљања хардвером да би уклонили уска грла у процесима података.
Резултат је свет великих података у којем живимо, где се огромни сетови података чувају и одржавају у центрима података, а све више им се приступа широк спектар технологија за широк спектар употребе. Од трговине до екологије, од јавног планирања до медицине, велики подаци постају све доступнији. У међувремену, владине агенције и друге веће организације и даље померају границе великих величина података и имплементирају још напреднија решења.
