天蝎工科男
一、認識大數(shù)據(jù)大數(shù)據(jù)本質其實也是數(shù)據(jù),不過也包括了些新的特征,數(shù)據(jù)來源廣;數(shù)據(jù)格式多樣化(結構化數(shù)據(jù)、非結構化數(shù)據(jù)、Excel文件等);數(shù)據(jù)量大(最少也是TB級別的、甚至可能是PB級別);數(shù)據(jù)增長速度快。二、大數(shù)據(jù)所需技能要求Python語言:編寫一些腳本時會用到。Scala語言:編寫Spark程序的最佳語言,當然也可以選擇用Python。Ozzie,azkaban:定時任務調度的工具。Hue,Zepplin:圖形化任務執(zhí)行管理,結果查看工具。Allluxio,Kylin等:通過對存儲的數(shù)據(jù)進行預處理,加快運算速度的工具。必須掌握的技能:、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)。
世唯裝飾
大數(shù)據(jù)工程師在職業(yè)技能鑒定中心報名考試即可。滿足報考條件就可以報考,主要的報考條件有:計算機、軟件工程、電子信息相關專業(yè)本科及以上學歷;熟悉數(shù)據(jù)中心的日常運維管理流程,熟練使用數(shù)據(jù)中心運維管理工具;熟悉云計算大數(shù)據(jù)環(huán)境搭建及運維工作等。
初級大數(shù)據(jù)工程師考試報名條件:
1、取得中專、大專學歷,從事計算機相關工作滿1年;
2、取得本科及以上學歷,從事計算機相關工作滿半年;
3、計算機相關專業(yè)大專及以上應屆畢業(yè)生。
中級大數(shù)據(jù)工程師考試報名條件:
1、取得中專、大專學歷,從事計算機相關工作滿2年;
2、取得本科及以上學歷,從事計算機相關工作滿1年;
3、持有初級大數(shù)據(jù)工程師專業(yè)技術等級證書滿1年。
優(yōu)質工程師考試問答知識庫