命喪與她丶
只要數(shù)據(jù)量級大(或者是數(shù)據(jù)復(fù)雜度,或者是其他方面的量級大)到普通的處理方法無法處理地實際上都可以算作是大數(shù)據(jù)開發(fā),只不過一般大數(shù)據(jù)開發(fā)目前招聘的很多都是做數(shù)據(jù)處理的。有如下幾個方向:1)數(shù)據(jù)挖掘是大數(shù)據(jù)處理地一個方向,這里做數(shù)據(jù)挖掘要有一些統(tǒng)計學(xué)基礎(chǔ)才能做,目前數(shù)據(jù)挖掘的方向其實不是很明確,和人工智能,機(jī)械學(xué)習(xí)也有一些關(guān)系,如果是做數(shù)據(jù)挖掘,基本的數(shù)據(jù)會由數(shù)據(jù)平臺部或數(shù)據(jù)運維部門提供2)數(shù)據(jù)平臺的開發(fā)(這里的平臺開發(fā)在不同公司的內(nèi)容又不一樣,小公司可能是根據(jù)公司業(yè)務(wù)做一套完整的數(shù)據(jù)分析系統(tǒng),大公司這個職位可能是一些開源組件的二次開發(fā))3)大數(shù)據(jù)運維方向:比如hadoop,spark集群的運維,涉及到ha等內(nèi)容4)大數(shù)據(jù)分析方向:有的公司會將職責(zé)細(xì)化,招聘一些專業(yè)的分析人員,去寫hql或者是其它類sql來對數(shù)據(jù)進(jìn)行分析最后,其實大數(shù)據(jù)平臺相關(guān)工作的劃分并不清晰,行業(yè)里沒有統(tǒng)一標(biāo)準(zhǔn),大公司小公司情況不同。關(guān)于技術(shù)方向更是用什么的都有,比如有的公司用spark,有的用impala,還有的用clickhouse等,最近flink也逐漸進(jìn)入大家的視野。所以在找工作時應(yīng)該要考慮的是自己的強(qiáng)項是什么,同時在選擇工作時要考慮到這個工作在做了三五年后,從這家公司出來還能不能找到工作。我個人的建議是如果你會java,那不要脫離java(scala)語言去做大數(shù)據(jù)開發(fā),也不要專業(yè)只去做數(shù)據(jù)分析工作,大數(shù)據(jù)行業(yè)目前仍舊有一些泡沫(個人看法),很多組件仍舊是基于java的,一旦脫離java語言本身,那源碼閱讀,二次開發(fā)都會有問題,同時生產(chǎn)環(huán)境自動化去執(zhí)行一些代碼也是需要語言支持的,或者最差的預(yù)估,如果大數(shù)據(jù)行業(yè)嚴(yán)重縮水(比如某些公司可以分析,可以挖掘的內(nèi)容有限),可以隨時轉(zhuǎn)到j(luò)ava服務(wù)器開發(fā)方向。
奶油不夠變球
2015年9月,國務(wù)院印發(fā)《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》,系統(tǒng)部署大數(shù)據(jù)發(fā)展工作;2016年3月,在發(fā)布的十三五規(guī)劃綱要中,提出“實施國家大數(shù)據(jù)戰(zhàn)略”,把大數(shù)據(jù)作為基礎(chǔ)性戰(zhàn)略資源;2020年,國家提出大力發(fā)展“新基建”,涉及7大領(lǐng)域,大數(shù)據(jù)中心就是其中之一。
從這一系列的政策措施中,可以看到國家對大數(shù)據(jù)技術(shù)的重視。而隨著數(shù)據(jù)相關(guān)的應(yīng)用和商業(yè)模式越來越多,與老百姓生活相關(guān)性日益密切,無論是國內(nèi)還是國外,都相繼出臺了成熟的數(shù)據(jù)產(chǎn)權(quán)以及數(shù)據(jù)安全的法律法規(guī),來保障大數(shù)據(jù)行業(yè)平穩(wěn)有序地發(fā)展。
隨著信息通信技術(shù)的發(fā)展,各行各業(yè)信息系統(tǒng)采集、處理和積累的數(shù)據(jù)量越來越多,全球大數(shù)據(jù)儲量呈爆炸式增長。近幾年全球大數(shù)據(jù)儲量的增速每年都保持在40%,2016年甚至達(dá)到了的增長率。
根據(jù)信息網(wǎng)近幾年的統(tǒng)計,大數(shù)據(jù)行業(yè)發(fā)展爆發(fā)趨勢,大量企業(yè)涌入,我國大數(shù)據(jù)產(chǎn)業(yè)規(guī)模穩(wěn)步增長。2016-2019年,短短四年時間,我國大數(shù)據(jù)產(chǎn)業(yè)市場規(guī)模由億元增長到億元,增速連續(xù)四年保持在20%以上。
當(dāng)前,我國正在加速從數(shù)據(jù)大國向著數(shù)據(jù)強(qiáng)國邁進(jìn)。隨著中國物聯(lián)網(wǎng)等新技術(shù)的持續(xù)推進(jìn),到2025年,其產(chǎn)生的數(shù)據(jù)將超過美國。數(shù)據(jù)的快速產(chǎn)生和各項配套政策的落實推動我國大數(shù)據(jù)行業(yè)高速發(fā)展,預(yù)計未來我國行業(yè)大數(shù)據(jù)市場規(guī)模增速將維持在15%-25%之間,到2025年中國大數(shù)據(jù)產(chǎn)業(yè)規(guī)模將達(dá)19508億元的高點。
大數(shù)據(jù)應(yīng)用已深入物聯(lián)網(wǎng)、人工智能、互聯(lián)網(wǎng)、5G、電商、金融、游戲、交通、傳媒、醫(yī)療、房地產(chǎn)、政務(wù)等各行各業(yè)。這也預(yù)示著無論是我們的日常生活還是生產(chǎn)制造、經(jīng)濟(jì)發(fā)展都離不開大數(shù)據(jù)技術(shù)。
自2015年以來,隨著大數(shù)據(jù)產(chǎn)業(yè)迅速發(fā)展,對大數(shù)據(jù)人才的需求也不斷增加。截止到2020年,大數(shù)據(jù)相關(guān)人才缺口達(dá)230萬。而這個數(shù)字,隨著大數(shù)據(jù)被列入到“新基建計劃”之后會持續(xù)增長。
根據(jù)職友集的統(tǒng)計,2021年大數(shù)據(jù)工程師崗位平均薪資高達(dá)月,相較于2020年增長了10%。其中1~3年工作經(jīng)驗的薪資為,3~5年經(jīng)驗的薪資為,明顯高于互聯(lián)網(wǎng)其他技術(shù)崗位。
大數(shù)據(jù)崗位職業(yè)生涯(參考):
(1)大數(shù)據(jù)開發(fā)工程師,工作1-3年,年薪18萬以上。
(2)高級大數(shù)據(jù)開發(fā)工程師,工作3-5年,年薪28萬以上。
(3)大數(shù)據(jù)架構(gòu)師,工作5-8年,年薪40萬以上。
(4)大數(shù)據(jù)技術(shù)總監(jiān),工作8-10年,年薪55萬以上。
(5)大數(shù)據(jù)首席數(shù)據(jù)官(CDO),工作10年以上,年薪85萬+。
是面向使用阿里云大數(shù)據(jù)產(chǎn)品的架構(gòu)、開發(fā)、運維類人員的專業(yè)技術(shù)認(rèn)證,通過ACP認(rèn)證證明你可以基于阿里云的產(chǎn)品制定有效的技術(shù)解決方案和企業(yè)最佳實踐。目前ACP大數(shù)據(jù)認(rèn)證有大數(shù)據(jù)工程師和大數(shù)據(jù)分析師兩個方向。
對于求職者來說,阿里系企業(yè)或者阿里的生態(tài)合作伙伴企業(yè),都會認(rèn)可ACP證書,如果你希望入職阿里,那考一個這樣的證書,會是你的加分項。
而對于其他非阿里系企業(yè),這樣一個證書可能用處并不大,但考了這個證書,至少證明你有相應(yīng)的大數(shù)據(jù)專業(yè)知識和實踐經(jīng)歷,是一個能力的證明,所以也是有用的。
具體到華為HCIE-Big Data認(rèn)證,其特點主要體現(xiàn)在四個方面:
理論深刻、技術(shù)領(lǐng)先,圍繞數(shù)據(jù)處理、數(shù)據(jù)分析、數(shù)據(jù)挖掘、數(shù)據(jù)可視等,課程涵蓋大數(shù)據(jù)分析和挖掘的前沿技術(shù),可以讓學(xué)員緊隨大數(shù)據(jù)發(fā)展趨勢,系統(tǒng)掌握大數(shù)據(jù)前沿技術(shù);
源于開源、勝于開源,基于開源社區(qū),包含開源大數(shù)據(jù)處理平臺Hadoop、內(nèi)存實時計算Spark、大數(shù)據(jù)平臺數(shù)據(jù)倉庫Hive、大數(shù)據(jù)NoSQL數(shù)據(jù)庫HBase等組件;
云上實驗、隨心學(xué)習(xí),實驗采用華為云作為實驗平臺,學(xué)員可隨時訪問進(jìn)行實驗操作,降低學(xué)習(xí)成本、提高效率;
結(jié)合案例、實戰(zhàn)領(lǐng)先,源于企業(yè)真實項目需求,實驗中融入大量實際項目應(yīng)用場景,如銀行定期存款業(yè)務(wù)預(yù)測、客戶分群、流動人口常住地分析等,便于學(xué)員學(xué)以致用,融會貫通。
相比較來說,華為大數(shù)據(jù)認(rèn)證比阿里的難度大很多,且費用貴很多,不太適合新手小白、學(xué)生黨。
對于想進(jìn)大廠的應(yīng)屆畢業(yè)生,建議做一個學(xué)習(xí)階段計劃表,同時需要一些具有含金量、能被市場認(rèn)可的認(rèn)證證書。它不僅能讓你的理論知識聯(lián)系實際應(yīng)用,更能對你的求職起到助推作用,是你找工作的一個加分項。
想了解的同學(xué)可以關(guān)注我,免費領(lǐng)取前端學(xué)習(xí)課件。
何水生之LED燈
就業(yè)前景是很不錯的,專業(yè)人才技能證,數(shù)據(jù)工程師證,數(shù)據(jù)分析師證,從業(yè)證,許可證,這些證書都是值得去報考的,這也是在找工作時候的一個優(yōu)勢。
優(yōu)質(zhì)工程師考試問答知識庫