晨馨1205
1、認(rèn)識(shí)大數(shù)據(jù)大數(shù)據(jù)本質(zhì)其實(shí)也是數(shù)據(jù),不過(guò)也包括了些新的特征,數(shù)據(jù)來(lái)源廣;數(shù)據(jù)格式多樣化(結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、Excel文件等);數(shù)據(jù)量大(最少也是TB級(jí)別的、甚至可能是PB級(jí)別);數(shù)據(jù)增長(zhǎng)速度快。2、大數(shù)據(jù)所需技能要求Python語(yǔ)言:編寫(xiě)一些腳本時(shí)會(huì)用到。Scala語(yǔ)言:編寫(xiě)Spark程序的最佳語(yǔ)言,當(dāng)然也可以選擇用Python。Ozzie,azkaban:定時(shí)任務(wù)調(diào)度的工具。Hue,Zepplin:圖形化任務(wù)執(zhí)行管理,結(jié)果查看工具。Allluxio,Kylin等:通過(guò)對(duì)存儲(chǔ)的數(shù)據(jù)進(jìn)行預(yù)處理,加快運(yùn)算速度的工具。3、必須掌握的技能:、 HBase(、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)。
青春冰帝
零基礎(chǔ)開(kāi)始學(xué)習(xí)的話(huà),大概需要5個(gè)月左右。大數(shù)據(jù)挖掘工程師的課程內(nèi)容涉獵很多,包括JavaSE 開(kāi)發(fā)、JavaEE開(kāi)發(fā)、并發(fā)編程實(shí)戰(zhàn)開(kāi)發(fā)、Linux精講、Hadoop 生態(tài)體系、Python 實(shí)戰(zhàn)開(kāi)發(fā)、Storm 實(shí)時(shí)開(kāi)發(fā)、Spark 生態(tài)體系、ElasticSearc、Docker容器引擎、機(jī)器學(xué)習(xí)、超大集群調(diào)優(yōu)、大數(shù)據(jù)項(xiàng)目實(shí)戰(zhàn)等。如果想要全部掌握以上的知識(shí),必須要進(jìn)行系統(tǒng)的學(xué)習(xí),建議報(bào)名相關(guān)的專(zhuān)業(yè)機(jī)構(gòu)進(jìn)行線(xiàn)上或者線(xiàn)下課程的學(xué)習(xí)。同時(shí),學(xué)成之后大數(shù)據(jù)工程師的就業(yè)前景還是很明朗的,在薪酬待遇也是很有優(yōu)勢(shì)的,因?yàn)榇髷?shù)據(jù)工程師在IT類(lèi)職業(yè)中比較稀缺的,收入待遇可以說(shuō)達(dá)到了同類(lèi)的頂級(jí)。國(guó)內(nèi)IT、通訊、行業(yè)招聘中,有10%都是和大數(shù)據(jù)相關(guān)的,且比例還在上升。想要了解更多有關(guān)數(shù)據(jù)挖掘的信息,可以了解一下CDA數(shù)據(jù)分析師的課程。課程內(nèi)容兼顧培養(yǎng)解決數(shù)據(jù)挖掘流程問(wèn)題的橫向能力以及解決數(shù)據(jù)挖掘算法問(wèn)題的縱向能力。要求學(xué)生具備從數(shù)據(jù)治理根源出發(fā)的思維,通過(guò)數(shù)字化工作方法來(lái)探查業(yè)務(wù)問(wèn)題,通過(guò)近因分析、宏觀根因分析等手段,再選擇業(yè)務(wù)流程優(yōu)化工具還是算法工具,而非“遇到問(wèn)題調(diào)算法包”點(diǎn)擊預(yù)約免費(fèi)試聽(tīng)課。
偽文藝的姑娘
目前大數(shù)據(jù)培訓(xùn)機(jī)構(gòu)提供的課程大約有兩種:一是大數(shù)據(jù)開(kāi)發(fā),二是數(shù)據(jù)分析與挖掘。大數(shù)據(jù)培訓(xùn)一般指大數(shù)據(jù)開(kāi)發(fā),不需要數(shù)學(xué)和統(tǒng)計(jì)學(xué)基礎(chǔ),學(xué)習(xí)的內(nèi)容大概有:
0基礎(chǔ):
第一階段: Java開(kāi)發(fā)·
第二階段: 大數(shù)據(jù)基礎(chǔ)·
第三階段: Hadoop生態(tài)體系·
第四階段: Spark生態(tài)系統(tǒng)·
第五階段: 項(xiàng)目實(shí)戰(zhàn)
提高班:
第一階段:大數(shù)據(jù)基礎(chǔ)·
第二階段:Hadoop生態(tài)體系·
第三階段:Spark生態(tài)系統(tǒng)·
第四階段:項(xiàng)目實(shí)戰(zhàn)
優(yōu)優(yōu)媽媽0509
包含的課程還是比較多的,一般要學(xué)5個(gè)月左右。了解下魔據(jù),有沒(méi)有基礎(chǔ)都可以,主要看的是自身學(xué)習(xí)是不是用心,夠不夠努力,現(xiàn)在這方面人才比較缺不用擔(dān)心就業(yè)問(wèn)題,也可以去實(shí)際了解一下。
jason86122
大數(shù)據(jù)工程師報(bào)考流程是:
1、目前想要報(bào)考大數(shù)據(jù)工程師證書(shū),需要通過(guò)機(jī)構(gòu)進(jìn)行資料申報(bào)。
2、大數(shù)據(jù)工程師證書(shū)資料審核通過(guò)后,就可以學(xué)習(xí)相關(guān)課程,準(zhǔn)備參加線(xiàn)上考試了。
3、考試成績(jī)合格后可以領(lǐng)取大數(shù)據(jù)工程師證書(shū),證書(shū)頒發(fā)部門(mén)不同,出證周期也不同,具體可詢(xún)問(wèn)專(zhuān)業(yè)老師。
大數(shù)據(jù)工程師報(bào)考條件:
一、中級(jí)(以下條件具備其一即可)
1、具備大數(shù)據(jù)工程師初級(jí)證書(shū)后,從事1年以上相關(guān)工作,并參加大數(shù)據(jù)工程師中級(jí)職業(yè)培訓(xùn),達(dá)到規(guī)定課時(shí)領(lǐng)取畢業(yè)證書(shū)者;
2、具有6年大數(shù)據(jù)工程師工作經(jīng)驗(yàn)者;
3、具備大數(shù)據(jù)工程師初級(jí)證書(shū)后,從事2年以上大數(shù)據(jù)工程相關(guān)工作者;
4、中等職業(yè)技術(shù)學(xué)校相關(guān)專(zhuān)業(yè)畢業(yè)生。
二、高級(jí)(以下條件具備其一即可)
1、具備中級(jí)大數(shù)據(jù)工程師證書(shū)后,從事2年以上相關(guān)工作,并參加大數(shù)據(jù)工程師高級(jí)職業(yè)培訓(xùn),達(dá)到規(guī)定課時(shí)領(lǐng)取畢業(yè)證書(shū)者;
2、大專(zhuān)及以上學(xué)歷相關(guān)專(zhuān)業(yè)畢業(yè)生,具有2年大數(shù)據(jù)工程師工作經(jīng)驗(yàn)者;
3、具備中級(jí)大數(shù)據(jù)工程師證書(shū)后,從事3年以上大數(shù)據(jù)工程相關(guān)工作者 。
優(yōu)質(zhì)工程師考試問(wèn)答知識(shí)庫(kù)