蛋塔阿姨
1、認識大數(shù)據(jù)大數(shù)據(jù)本質(zhì)其實也是數(shù)據(jù),不過也包括了些新的特征,數(shù)據(jù)來源廣;數(shù)據(jù)格式多樣化(結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、Excel文件等);數(shù)據(jù)量大(最少也是TB級別的、甚至可能是PB級別);數(shù)據(jù)增長速度快。2、大數(shù)據(jù)所需技能要求Python語言:編寫一些腳本時會用到。Scala語言:編寫Spark程序的最佳語言,當然也可以選擇用Python。Ozzie,azkaban:定時任務(wù)調(diào)度的工具。Hue,Zepplin:圖形化任務(wù)執(zhí)行管理,結(jié)果查看工具。Allluxio,Kylin等:通過對存儲的數(shù)據(jù)進行預(yù)處理,加快運算速度的工具。3、必須掌握的技能:、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)。
楓中落葉
大數(shù)據(jù)工程師報考流程是:
1、目前想要報考大數(shù)據(jù)工程師證書,需要通過機構(gòu)進行資料申報。
2、大數(shù)據(jù)工程師證書資料審核通過后,就可以學習相關(guān)課程,準備參加線上考試了。
3、考試成績合格后可以領(lǐng)取大數(shù)據(jù)工程師證書,證書頒發(fā)部門不同,出證周期也不同,具體可詢問專業(yè)老師。
大數(shù)據(jù)工程師報考條件:
一、中級(以下條件具備其一即可)
1、具備大數(shù)據(jù)工程師初級證書后,從事1年以上相關(guān)工作,并參加大數(shù)據(jù)工程師中級職業(yè)培訓,達到規(guī)定課時領(lǐng)取畢業(yè)證書者;
2、具有6年大數(shù)據(jù)工程師工作經(jīng)驗者;
3、具備大數(shù)據(jù)工程師初級證書后,從事2年以上大數(shù)據(jù)工程相關(guān)工作者;
4、中等職業(yè)技術(shù)學校相關(guān)專業(yè)畢業(yè)生。
二、高級(以下條件具備其一即可)
1、具備中級大數(shù)據(jù)工程師證書后,從事2年以上相關(guān)工作,并參加大數(shù)據(jù)工程師高級職業(yè)培訓,達到規(guī)定課時領(lǐng)取畢業(yè)證書者;
2、大專及以上學歷相關(guān)專業(yè)畢業(yè)生,具有2年大數(shù)據(jù)工程師工作經(jīng)驗者;
3、具備中級大數(shù)據(jù)工程師證書后,從事3年以上大數(shù)據(jù)工程相關(guān)工作者 。
優(yōu)質(zhì)工程師考試問答知識庫