大數(shù)據(jù)工程師高級(jí)考試
舞言李萍
想得快崩潰
一、認(rèn)識(shí)大數(shù)據(jù)大數(shù)據(jù)本質(zhì)其實(shí)也是數(shù)據(jù)，不過(guò)也包括了些新的特征，數(shù)據(jù)來(lái)源廣;數(shù)據(jù)格式多樣化(結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、Excel文件等);數(shù)據(jù)量大(最少也是TB級(jí)別的、甚至可能是PB級(jí)別);數(shù)據(jù)增長(zhǎng)速度快。二、大數(shù)據(jù)所需技能要求Python語(yǔ)言：編寫(xiě)一些腳本時(shí)會(huì)用到。Scala語(yǔ)言：編寫(xiě)Spark程序的最佳語(yǔ)言，當(dāng)然也可以選擇用Python。Ozzie，azkaban：定時(shí)任務(wù)調(diào)度的工具。Hue，Zepplin：圖形化任務(wù)執(zhí)行管理，結(jié)果查看工具。Allluxio，Kylin等：通過(guò)對(duì)存儲(chǔ)的數(shù)據(jù)進(jìn)行預(yù)處理，加快運(yùn)算速度的工具。必須掌握的技能：、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)。
愛(ài)上大碴粥
大數(shù)據(jù)工程師報(bào)考流程是：
1、目前想要報(bào)考大數(shù)據(jù)工程師證書(shū)，需要通過(guò)機(jī)構(gòu)進(jìn)行資料申報(bào)。
2、大數(shù)據(jù)工程師證書(shū)資料審核通過(guò)后，就可以學(xué)習(xí)相關(guān)課程，準(zhǔn)備參加線上考試了。
3、考試成績(jī)合格后可以領(lǐng)取大數(shù)據(jù)工程師證書(shū)，證書(shū)頒發(fā)部門(mén)不同，出證周期也不同，具體可詢問(wèn)專業(yè)老師。
大數(shù)據(jù)工程師報(bào)考條件：
一、中級(jí)（以下條件具備其一即可）
1、具備大數(shù)據(jù)工程師初級(jí)證書(shū)后，從事1年以上相關(guān)工作，并參加大數(shù)據(jù)工程師中級(jí)職業(yè)培訓(xùn)，達(dá)到規(guī)定課時(shí)領(lǐng)取畢業(yè)證書(shū)者；
2、具有6年大數(shù)據(jù)工程師工作經(jīng)驗(yàn)者；
3、具備大數(shù)據(jù)工程師初級(jí)證書(shū)后，從事2年以上大數(shù)據(jù)工程相關(guān)工作者；
4、中等職業(yè)技術(shù)學(xué)校相關(guān)專業(yè)畢業(yè)生。
二、高級(jí)（以下條件具備其一即可）
1、具備中級(jí)大數(shù)據(jù)工程師證書(shū)后，從事2年以上相關(guān)工作，并參加大數(shù)據(jù)工程師高級(jí)職業(yè)培訓(xùn)，達(dá)到規(guī)定課時(shí)領(lǐng)取畢業(yè)證書(shū)者；
2、大專及以上學(xué)歷相關(guān)專業(yè)畢業(yè)生，具有2年大數(shù)據(jù)工程師工作經(jīng)驗(yàn)者；
3、具備中級(jí)大數(shù)據(jù)工程師證書(shū)后，從事3年以上大數(shù)據(jù)工程相關(guān)工作者 。
優(yōu)質(zhì)工程師考試問(wèn)答知識(shí)庫(kù)