玉米臥熊
一、認(rèn)識大數(shù)據(jù)大數(shù)據(jù)本質(zhì)其實(shí)也是數(shù)據(jù),不過也包括了些新的特征,數(shù)據(jù)來源廣;數(shù)據(jù)格式多樣化(結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、Excel文件等);數(shù)據(jù)量大(最少也是TB級別的、甚至可能是PB級別);數(shù)據(jù)增長速度快。二、大數(shù)據(jù)所需技能要求Python語言:編寫一些腳本時(shí)會(huì)用到。Scala語言:編寫Spark程序的最佳語言,當(dāng)然也可以選擇用Python。Ozzie,azkaban:定時(shí)任務(wù)調(diào)度的工具。Hue,Zepplin:圖形化任務(wù)執(zhí)行管理,結(jié)果查看工具。Allluxio,Kylin等:通過對存儲的數(shù)據(jù)進(jìn)行預(yù)處理,加快運(yùn)算速度的工具。必須掌握的技能:、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)。
悠閑小貓
大數(shù)據(jù)工程師在職業(yè)技能鑒定中心報(bào)名考試即可。
滿足報(bào)考條件就可以報(bào)考,主要的報(bào)考條件有:計(jì)算機(jī)、軟件工程、電子信息相關(guān)專業(yè)本科及以上學(xué)歷;熟悉數(shù)據(jù)中心的日常運(yùn)維管理流程,熟練使用數(shù)據(jù)中心運(yùn)維管理工具;熟悉云計(jì)算大數(shù)據(jù)環(huán)境搭建及運(yùn)維工作等。
初級大數(shù)據(jù)工程師考試報(bào)名條件:
1、取得中專、大專學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿1年;
2、取得本科及以上學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿半年;
3、計(jì)算機(jī)相關(guān)專業(yè)大專及以上應(yīng)屆畢業(yè)生。
中級大數(shù)據(jù)工程師考試報(bào)名條件:
1、取得中專、大專學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿2年;
2、取得本科及以上學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿1年;
3、持有初級大數(shù)據(jù)工程師專業(yè)技術(shù)等級證書滿1年。
高級大數(shù)據(jù)工程師考試報(bào)名條件:
1、取得中專、大專學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿3年;
2、取得本科及以上學(xué)歷,從事計(jì)算機(jī)相關(guān)工作滿2年;
3、持有中級大數(shù)據(jù)專業(yè)技術(shù)等級證書滿1年。
不管是大數(shù)據(jù)工程師證書,數(shù)據(jù)分析師證書,每個(gè)職業(yè)的相關(guān)技能認(rèn)證,其實(shí)都是一種錦上添花的作用,畢竟技術(shù)類的工作都是要看你的實(shí)際操作水平的。企業(yè)都喜歡主動(dòng)的、善于思考的人才,這樣才能更好地成長起來,解決工作當(dāng)中的實(shí)際問題。
優(yōu)質(zhì)工程師考試問答知識庫