大數(shù)據(jù)工程師培訓(xùn)路線規(guī)劃
你的小惡魔
螢火蟲在哪里
大大數(shù)據(jù)開發(fā)工程師要學(xué)習(xí)哪些課程大數(shù)據(jù)開發(fā)工程師要學(xué)習(xí)哪些大數(shù)據(jù)開發(fā)工程師要學(xué)習(xí)哪些課程
陽光明媚1618
數(shù)據(jù)分析師的職業(yè)發(fā)展非常的寬泛 ，非常的廣，提供給我們很多發(fā)展的機(jī)遇，那么作為一個數(shù)據(jù)分析師，他會了解到企業(yè)經(jīng)營或者一個組織的管理，非常非常深入地或者很細(xì)地各個方面的一些情況，因為我們?nèi)粘６紩ζ髽I(yè)經(jīng)營和組織管理方面的問題進(jìn)行分析，來提供一些建議。因此我們對決明企業(yè)管理和經(jīng)營會隨著數(shù)據(jù)分析職業(yè)發(fā)展越來越了解，在了解了職業(yè)和業(yè)務(wù)的情況下，作為一個九道門數(shù)據(jù)分析師，他是有很多方向可以走。
01
一個方向是我個人比較內(nèi)向不希望和人做更多地溝通，我也不希望去管理別人的時候他可以做數(shù)據(jù)科學(xué)家，我們對企業(yè)的運營和經(jīng)營在非常了解的情況下，能夠?qū)W習(xí)一些高端的數(shù)據(jù)挖掘的技術(shù)或者數(shù)據(jù)分析的技術(shù)包括一些深度學(xué)習(xí)之類的，包括把自己的編程能力和系統(tǒng)的控制都提高之后我們可以在數(shù)據(jù)分析地領(lǐng)域走到我們領(lǐng)域地最高峰就是數(shù)據(jù)科學(xué)家。
02
有些同學(xué)在數(shù)據(jù)分析的學(xué)習(xí)過程中，發(fā)現(xiàn)自己樂于分享也樂于溝通、管理別人，并對業(yè)務(wù)更有興趣的時候，他可以走向業(yè)務(wù)管理的職業(yè)，為什么我們會說數(shù)據(jù)分析更適合做業(yè)務(wù)管理，因為在企業(yè)經(jīng)營中，我們其實都在管理一些指標(biāo)，也就是我們?nèi)粘４蚪坏赖亩际菙?shù)據(jù)，數(shù)據(jù)分析師每天都在和數(shù)據(jù)打交道，對企業(yè)經(jīng)營能夠做到非常精細(xì)化的去理解并知道如何進(jìn)行優(yōu)化的情況下，他更適合去做一些管理的崗位，因此數(shù)據(jù)分析師如果了解到自己有具備這樣的能力，他的職業(yè)規(guī)劃可以向CXO，這樣的職業(yè)階層層面發(fā)展，隨著工作年齡的增長，他是可以走到管理的崗位，甚至是比較高的管理崗位。
云中子的小白
大數(shù)據(jù)方向的工作目前分為三個主要方向: 01.大數(shù)據(jù)工程師02.數(shù)據(jù)分析師03.大數(shù)據(jù)科學(xué)家04.其他（數(shù)據(jù)挖掘本質(zhì)算是機(jī)器學(xué)習(xí)，不過和數(shù)據(jù)相關(guān)，也可以理解為大數(shù)據(jù)的一個方向吧）一、大數(shù)據(jù)工程師的技能要求二、大數(shù)據(jù)學(xué)習(xí)路徑三、學(xué)習(xí)資源推薦（書籍、博客、網(wǎng)站）一、大數(shù)據(jù)工程師的技能要求總結(jié)如下:必須技能10條:高級編程(虛擬機(jī)、并發(fā)) 基本操作（此處指HDFS+MapReduce+Yarn ）（JavaAPI操作+Phoenix ） 、 (Core+sparksql+Spark streaming ）進(jìn)階技能6條:11.機(jī)器學(xué)習(xí)算法以及mahout庫加語言 架構(gòu)架構(gòu)二、學(xué)習(xí)路徑第一階段:學(xué)習(xí)（跟鳥哥學(xué)就ok了） 高級學(xué)習(xí)（《深入理解Java虛擬機(jī)》、《Java高并發(fā)實戰(zhàn)》第二階段: （董西成的書）（《HBase權(quán)威指南》）（《Hive開發(fā)指南》）（《快學(xué)Scala》） （《Spark 快速大數(shù)據(jù)分析》） （跟著廖雪峰的博客學(xué)習(xí)就ok了）第三階段:對應(yīng)技能需求，到網(wǎng)上多搜集一些資料就ok了，我把最重要的事情(要學(xué)什么告訴你了)，剩下的就是你去搜集對應(yīng)的資料學(xué)習(xí)就ok了當(dāng)然如果你覺得自己看書效率太慢，你可以網(wǎng)上搜集一些課程，跟著課程走也OK 。這個完全根據(jù)自己情況決定,如果看書效率不高就上網(wǎng)課，相反的話就自己看書。三，學(xué)習(xí)資源推薦: 官網(wǎng)官網(wǎng)官網(wǎng)05.過往的記憶（技術(shù)博客），51CTO 07.至于書籍當(dāng)當(dāng)、京東一搜會有很多，其實內(nèi)容都差不多 那么如何從零開始規(guī)劃大數(shù)據(jù)學(xué)習(xí)之路！ 大數(shù)據(jù)的領(lǐng)域非常廣泛，往往使想要開始學(xué)習(xí)大數(shù)據(jù)及相關(guān)技術(shù)的人望而生畏。大數(shù)據(jù)技術(shù)的種類眾多，這同樣使得初學(xué)者難以選擇從何處下手。本文將為你開始學(xué)習(xí)大數(shù)據(jù)的征程以及在大數(shù)據(jù)產(chǎn)業(yè)領(lǐng)域找到工作指明道路，提供幫助。
想得快崩潰
不同公司對數(shù)據(jù)分析師的職位劃分稍有不同。在一些中小型企業(yè)，在沒有成立獨立的數(shù)據(jù)中心前，數(shù)據(jù)分析的相關(guān)職位往往是在市場部、運營部的管轄之下，人數(shù)通常在2－4人不等。對于一些大型企業(yè)，有獨立的數(shù)據(jù)分析部門，團(tuán)隊成員也在數(shù)十人到百余人不等。對于職位頭銜，有的按行政級別劃分，如專員、主管、經(jīng)理、總監(jiān)等；也有的按專業(yè)水平劃分，如助理、高級、資深、專家等。數(shù)據(jù)分析職位整體上分為兩大類：1、數(shù)據(jù)分析師：專業(yè)能力成長路徑：助理數(shù)據(jù)分析師－數(shù)據(jù)分析師－資深數(shù)據(jù)分析師－高級數(shù)據(jù)分析師行政職位晉升路徑：數(shù)據(jù)分析專員－數(shù)據(jù)分析主管－數(shù)據(jù)分析經(jīng)理－數(shù)據(jù)分析總監(jiān)主要專業(yè)技能要求：數(shù)據(jù)庫知識（SQL）、基本的統(tǒng)計分析知識、熟練掌握Excel，了解SPSS/SAS，良好的PPT展示能力。2、數(shù)據(jù)分析工程師：算法工程師、建模工程師。（以上內(nèi)容來自第一職場網(wǎng)“教練式”職業(yè)規(guī)劃咨詢報告）
愛上大碴粥
大數(shù)據(jù)工程師要學(xué)什么課程？沒接觸過大數(shù)據(jù)的人也許不知道大數(shù)據(jù)工程師是什么，更別說知道大數(shù)據(jù)工程師要學(xué)什么課程了。我們先來說下大數(shù)據(jù)工程師是做什么的吧。是負(fù)責(zé)公司互聯(lián)網(wǎng)數(shù)據(jù)分析的一個職位，對數(shù)據(jù)庫進(jìn)行開發(fā)和(或)維護(hù)，需要具備超強(qiáng)的邏輯思維，精通各種語言，需要有相當(dāng)好的毅力和耐心。光環(huán)大數(shù)據(jù)的大數(shù)據(jù)培訓(xùn)課程分為如下幾個階段：第一階段：java核心學(xué)習(xí)學(xué)習(xí)內(nèi)容：Java核心內(nèi)容學(xué)習(xí)目標(biāo)：掌握數(shù)據(jù)類型與運算符，數(shù)組、類與對象；掌握IO流與反射、多線程、JDBC。完成目標(biāo)：Java多線程模擬多窗口售票，Java集合框架管理。第二階段: JavaEE課程大綱學(xué)習(xí)內(nèi)容：JavaEE核心內(nèi)容學(xué)習(xí)目標(biāo)：Mysql數(shù)據(jù)基礎(chǔ)知識，Jdbc 基礎(chǔ)概念和操作掌握HTML和CSS語法、Java核心語法完成目標(biāo)：京東電商網(wǎng)站項目、2048小游戲。第三階段：Linux精講學(xué)習(xí)內(nèi)容：Linux命令、文件、配置，Shell、Awk、Sed學(xué)習(xí)目標(biāo)：搭建負(fù)載均衡、高可靠的服務(wù)器集群，可大網(wǎng)站并發(fā)訪問量，保證服務(wù)不間斷完成目標(biāo)：Linux環(huán)境搭建、shell腳本小游戲 貪吃蛇。第四階段：Hadoop生態(tài)體系學(xué)習(xí)內(nèi)容：HDFS、MapReduce、Hive、Sqoop、Oozie學(xué)習(xí)目標(biāo)：掌握HDFS原理、操作和應(yīng)用開發(fā)，掌握分布式運算、Hive數(shù)據(jù)倉庫原理及應(yīng)用。完成目標(biāo)：微博數(shù)據(jù)大數(shù)據(jù)分析、汽車銷售大數(shù)據(jù)分析第五階段：Storm實時開發(fā)學(xué)習(xí)內(nèi)容：Zookeeper、HBase、Storm實時數(shù)據(jù)學(xué)習(xí)目標(biāo)：掌握Storm程序的開發(fā)及底層原理，具備開發(fā)基于Storm的實時計算程序的能力。完成目標(biāo)：實時處理新數(shù)據(jù)和更新數(shù)據(jù)庫，處理密集查詢并行搜索處理大集合的數(shù)據(jù)。
玩兒泥巴小姐
首先你要有自己職業(yè)規(guī)劃，知道數(shù)據(jù)分析和大數(shù)據(jù)是做什么的、能解決什么問題，給自己定一個小目標(biāo)。一個有經(jīng)驗的數(shù)據(jù)科學(xué)家：最少要有2到3年工作經(jīng)驗，而工作經(jīng)驗體現(xiàn)在運用數(shù)據(jù)科學(xué)處理各種商業(yè)問題的能力上，同時需要具備以下技能：一流的分析技巧：探索凌亂的數(shù)據(jù)集并提取洞察的能力；在SQL運用能力方面是一名內(nèi)行；能很好的掌握假設(shè)檢驗、分配、回歸分析和貝葉斯方法；有與商業(yè)方面的機(jī)器學(xué)習(xí)經(jīng)驗；對于Python語言和Jupyter環(huán)境有經(jīng)驗；對于pandas、numpy、sk-learn和NLTK有一定操作經(jīng)驗；具備寫編寫Latex格式文檔的能力；在統(tǒng)計學(xué)，運籌學(xué)，經(jīng)濟(jì)學(xué)，計算機(jī)科學(xué)，或其它相關(guān)領(lǐng)域具有本科或碩士學(xué)歷。未來數(shù)據(jù)分析是一種工具，在金融、互聯(lián)網(wǎng)、電子商務(wù)、公共服務(wù)、醫(yī)療健康等領(lǐng)域非常廣泛，職位上面偏業(yè)務(wù)的有數(shù)據(jù)分析師、數(shù)據(jù)產(chǎn)品經(jīng)理、數(shù)據(jù)規(guī)劃師等職位，偏技術(shù)的有大數(shù)據(jù)工程師、大數(shù)據(jù)架構(gòu)師、算法工程師等職位。你需要了解自己的興趣和特長并選擇合適的職業(yè)通道。在大學(xué)本科階段，沒有什么比學(xué)好數(shù)學(xué)更為重要的了：先關(guān)課程包括《高等數(shù)學(xué)》《線性代數(shù)》《概率與數(shù)理統(tǒng)計》《數(shù)值分析》《多元分析》《泛函分析》。數(shù)學(xué)是一門基礎(chǔ)學(xué)科，需要長時間的學(xué)習(xí)和知識積累，而且數(shù)學(xué)課程離開學(xué)校是沒地方補(bǔ)的。其他能力大部分是可以通過其他渠道學(xué)習(xí)的：一、數(shù)據(jù)分析技能：數(shù)據(jù)清洗建立數(shù)學(xué)模型運用合適的統(tǒng)計方法來分析數(shù)據(jù)運用機(jī)器學(xué)習(xí)算法檢驗?zāi)Ｐ偷恼_與否實現(xiàn)數(shù)據(jù)可視化二、編程技能：精通一種或多種數(shù)據(jù)分析工具（R/Matlab/SPSS/SAS)精通一種或多種面向?qū)蔷幊陶Z言（Python、C++、Java、C#、perl 等）其他IT公司經(jīng)常需要的技能（熟悉HTML/CSS，互聯(lián)網(wǎng)公司可能會要求)三、數(shù)據(jù)管理技能（尤其是針對大規(guī)模數(shù)據(jù)）：hadoop（尤其是hive/HBase、HDFS和MapRdeuce)SQLNoSL其他IT公司常用的數(shù)據(jù)管理技能四、商業(yè)知識：熟悉瀑布模型和敏捷模型等軟件開發(fā)模式理解公司運行規(guī)則對于產(chǎn)業(yè)所屬領(lǐng)域有所了解其他公司常用商業(yè)技巧五、交流技巧（軟實力）：做演講和PPT演示來展示產(chǎn)品撰寫報名懂得傾聽重點信息能夠?qū)⒂脩舻男枨筠D(zhuǎn)換為實際產(chǎn)品其他公司常用交流交往技能作為第一批“數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)”的科班學(xué)生，你們無疑是幸運的，仰望星空，你們已經(jīng)走在數(shù)據(jù)科學(xué)的大路上，前途一片光明。希望你們能想老一輩統(tǒng)計學(xué)家和人工智能專家學(xué)習(xí)，繼往開來，早日成才！
甜田心ttx
不同公司對數(shù)據(jù)分析師的職位劃分稍有不同。在一些中小型企業(yè)，在沒有成立獨立的數(shù)據(jù)中心前，數(shù)據(jù)分析的相關(guān)職位往往是在市場部、運營部的管轄之下，人數(shù)通常在2－4人不等。對于一些大型企業(yè)，有獨立的數(shù)據(jù)分析部門，團(tuán)隊成員也在數(shù)十人到百余人不等。對于職位頭銜，有的按行政級別劃分，如專員、主管、經(jīng)理、總監(jiān)等；也有的按專業(yè)水平劃分，如助理、高級、資深、專家等。數(shù)據(jù)分析職位整體上分為兩大類：1、數(shù)據(jù)分析師：專業(yè)能力成長路徑：助理數(shù)據(jù)分析師－數(shù)據(jù)分析師－資深數(shù)據(jù)分析師－高級數(shù)據(jù)分析師行政職位晉升路徑：數(shù)據(jù)分析專員－數(shù)據(jù)分析主管－數(shù)據(jù)分析經(jīng)理－數(shù)據(jù)分析總監(jiān)主要專業(yè)技能要求：數(shù)據(jù)庫知識（SQL）、基本的統(tǒng)計分析知識、熟練掌握Excel，了解SPSS/SAS，良好的PPT展示能力。2、數(shù)據(jù)分析工程師：算法工程師、建模工程師。
薔薇朵朵7
目前我們正處在大數(shù)據(jù)時代，掌握大數(shù)據(jù)相關(guān)技術(shù)對提高自己的職場競爭力一定是有幫助的。
大數(shù)據(jù)學(xué)習(xí)建議：
1、0基礎(chǔ)小白從Java語言開始學(xué)習(xí)
因為當(dāng)前的大數(shù)據(jù)技術(shù)主要是用 Java 實現(xiàn)的或者是基于 Java 的，想入行大數(shù)據(jù)，Java基礎(chǔ)是必備的；
2、Java開發(fā)能力需要通過實際項目來鍛煉
在學(xué)習(xí)完Java語言之后，往往只是掌握了Java語言的基本操作，只有通過真正的項目鍛煉才能進(jìn)一步提高Java開發(fā)能力。
3、大數(shù)據(jù)開發(fā)有明顯的場景要求
大數(shù)據(jù)開發(fā)是基于目前已有信息系統(tǒng)的升級改造，是一個系統(tǒng)的過程，包括平臺的搭建、數(shù)據(jù)的存儲、服務(wù)的部署等都有較大的變化，要想真正理解大數(shù)據(jù)需要有一個積累的過程。對于初學(xué)者來說，應(yīng)該先建立一個對開發(fā)場景的認(rèn)知，這樣會更好的理解大數(shù)據(jù)平臺的價值和作用。
4、從基礎(chǔ)開發(fā)開始做起
對于初級程序員來說，不管自己是否掌握大數(shù)據(jù)平臺的開發(fā)知識，都是從基礎(chǔ)的開發(fā)開始做起，基于大數(shù)據(jù)平臺開發(fā)環(huán)境。
從就業(yè)的角度來說，大數(shù)據(jù)開發(fā)是一個不錯的選擇。但我并不建議脫離實際應(yīng)用來學(xué)習(xí)大數(shù)據(jù)，最好要結(jié)合實際的開發(fā)任務(wù)來一邊學(xué)習(xí)一邊使用。
優(yōu)質(zhì)工程師考試問答知識庫
