Кућа Аудио Како скл на хадооп-у може помоћи при великој анализи података?

Како скл на хадооп-у може помоћи при великој анализи података?

Преглед садржаја:

Anonim

СКЛ он Хадооп је група алата за аналитичку апликацију која комбинују испитивање у СКЛ стилу и обраду података са најновијим елементима оквира Хадооп података. Појава СКЛ-а на Хадоопу важан је развој за велику обраду података јер омогућава ширим групама људи да успешно раде са оквиром за обраду података Хадооп покретањем СКЛ упита на огромној количини великих података које Хадооп обрађује. Очито, оквир Хадооп раније није био толико доступан људима, посебно у погледу његових могућности за испитивање. На основу развоја, у раду је рађено неколико алата који обећавају побољшање продуктивности предузећа када је у питању обрада и анализа великих података квалитетом и брзином. Такође, није потребно много улагати у учење алата, као што то треба учинити традиционално знање СКЛ-а.

Дефиниција СКЛ-а на Хадоопу

СКЛ он Хадооп је група апликација која вам омогућава покретање упита у стилу СКЛ на великим подацима који се налазе у оквиру за обраду података Хадооп. Очигледно је да су упити, дохваћање и анализа података постали лакши додавањем СКЛ-а на Хадооп-у. С обзиром да је СКЛ првобитно дизајниран за релацијске базе података, морао је бити модификован према Хадооп 1 моделу који садржи МапРедуце и Хадооп Дистрибуирани датотечни систем (ХДФС) и Хадооп 2 модел који нема МапРедуце и ХДФС.

Један од најранијих напора за комбиновање СКЛ-а са Хадооп-ом резултирао је стварањем складишта података Хиве са ХивеКЛ софтвером који би могао превести упите у СКЛ стилу у задатке МапРедуце. Након тога развијено је неколико апликација које би могле да ураде сличне послове. Истакнутији део каснијих алата су бушилица, БигСКЛ, ХАВК, Импала, Хадапт, Стингер, Х-СКЛ, машина за спајање, Престо, ПолиБасе, Спарк, ЈетхроДата, Схарк (кошница на искре) и Тез (кошница на Тез).

Како скл на хадооп-у може помоћи при великој анализи података?