大數(shù)據(jù)工程師有不少細(xì)分方向，不同的方向需要具備不同的知識結(jié)構(gòu)，通常情況下大數(shù)據(jù)工程師分為四個(gè)具體的工作領(lǐng)域，分別是大數(shù)據(jù)底層平臺研發(fā)、大數(shù)據(jù)應(yīng)用開發(fā)、大數(shù)據(jù)分析和大數(shù)據(jù)運(yùn)維，其中大數(shù)據(jù)平臺研發(fā)工程師的數(shù)量占比較少，屬于大數(shù)據(jù)領(lǐng)域的高端人才，往往從業(yè)者在研究生期間主攻的方向就是大數(shù)據(jù)平臺研發(fā)。

大數(shù)據(jù)應(yīng)用開發(fā)工程師是大數(shù)據(jù)領(lǐng)域一個(gè)比較熱門的崗位，由于目前大數(shù)據(jù)正在處在落地應(yīng)用的階段，所以有大量的傳統(tǒng)應(yīng)用需要進(jìn)行大數(shù)據(jù)改造，因此大數(shù)據(jù)應(yīng)用開發(fā)崗位有較多的人才需求。這個(gè)崗位需要掌握的知識結(jié)構(gòu)包括大數(shù)據(jù)平臺體系結(jié)構(gòu)，比如目前常見的Hadoop、Spark平臺，以及眾多組件的功能和應(yīng)用，另外還需要掌握至少一門編程語言，比如Java、Python、Scala等，這些編程語言是可以開發(fā)落地應(yīng)用的。

大數(shù)據(jù)分析工程師是大數(shù)據(jù)領(lǐng)域非常重要的崗位，因?yàn)榇髷?shù)據(jù)的核心之一是數(shù)據(jù)價(jià)值化，而數(shù)據(jù)價(jià)值化的核心則在于數(shù)據(jù)的分析和應(yīng)用，所以數(shù)據(jù)分析是大數(shù)據(jù)應(yīng)用的一個(gè)重點(diǎn)所在。大數(shù)據(jù)分析工程師需要掌握的知識結(jié)構(gòu)包括算法設(shè)計(jì)、編程語言以及呈現(xiàn)工具，算法設(shè)計(jì)是大數(shù)據(jù)分析師需要掌握的重點(diǎn)內(nèi)容，而編程語言的作用則是完成算法的實(shí)現(xiàn)。另外，大數(shù)據(jù)分析師還需要掌握一些常見的分析工具，比如一些常見的BI工具，在一些比較簡單的場景下BI工具能完成大量的工作，并生成呈現(xiàn)界面?？匆粋€(gè)使用Python中scipy庫的應(yīng)用：

大數(shù)據(jù)運(yùn)維工程師的主要工作內(nèi)容是搭建大數(shù)據(jù)平臺、部署大數(shù)據(jù)功能組件、配置網(wǎng)絡(luò)環(huán)境和硬件環(huán)境、維護(hù)大數(shù)據(jù)平臺，大數(shù)據(jù)運(yùn)維工程師需要具備的知識結(jié)構(gòu)包括計(jì)算機(jī)網(wǎng)絡(luò)、大數(shù)據(jù)平臺體系結(jié)構(gòu)、編程語言（編寫運(yùn)維腳本）等，通常情況下，大數(shù)據(jù)運(yùn)維工程師也需要對數(shù)據(jù)庫有深入的了解。

大數(shù)據(jù)是我的主要研究方向之一，目前我也在帶大數(shù)據(jù)方向的研究生，我會陸續(xù)在頭條寫一些關(guān)于大數(shù)據(jù)方面的文章，感興趣的朋友可以