數(shù)據(jù)庫(kù)工程師培訓(xùn)方案
天才少女JESSICA
重疊的歲月
第一學(xué)期，Windows系統(tǒng)管理組建與維護(hù)企業(yè)網(wǎng)絡(luò)windows網(wǎng)絡(luò)服務(wù)組建企業(yè)網(wǎng)站與數(shù)據(jù)庫(kù)系統(tǒng)網(wǎng)絡(luò)維護(hù)實(shí)戰(zhàn)；第二學(xué)期，Exchange企業(yè)郵件與windows安全應(yīng)用數(shù)據(jù)庫(kù)應(yīng)用與性能優(yōu)化使用構(gòu)建支態(tài)網(wǎng)站linux系統(tǒng)管理linux網(wǎng)絡(luò)服務(wù)inux網(wǎng)關(guān)及安全應(yīng)用linux項(xiàng)目實(shí)戰(zhàn)構(gòu)建大型企業(yè)網(wǎng)絡(luò)網(wǎng)絡(luò)安全高及應(yīng)用網(wǎng)絡(luò)項(xiàng)目實(shí)戰(zhàn)。
夢(mèng)回紅樓
數(shù)據(jù)分析工程師+培訓(xùn)?結(jié)構(gòu)介紹如下：
了解數(shù)據(jù)采集的意義在于真正了解數(shù)據(jù)的原始面貌，包括數(shù)據(jù)產(chǎn)生的時(shí)間、條件、格式、內(nèi)容、長(zhǎng)度、限制條件等。這會(huì)幫助數(shù)據(jù)分析師更有針對(duì)性的控制數(shù)據(jù)生產(chǎn)和采集過(guò)程，避免由于違反數(shù)據(jù)采集規(guī)則導(dǎo)致的數(shù)據(jù)問(wèn)題；同時(shí)，對(duì)數(shù)據(jù)采集邏輯的認(rèn)識(shí)增加了數(shù)據(jù)分析師對(duì)數(shù)據(jù)的理解程度，尤其是數(shù)據(jù)中的異常變化。
Omniture中的Prop變量長(zhǎng)度只有100個(gè)字符，在數(shù)據(jù)采集部署過(guò)程中就不能把含有大量中文描述的文字賦值給Prop變量（超過(guò)的字符會(huì)被截?cái)啵?/p>
在Webtrekk323之前的Pixel版本，單條信息默認(rèn)最多只能發(fā)送不超過(guò)2K的數(shù)據(jù)。當(dāng)頁(yè)面含有過(guò)多變量或變量長(zhǎng)度有超出限定的情況下，在保持?jǐn)?shù)據(jù)收集的需求下，通常的解決方案是采用多個(gè)sendinfo方法分條發(fā)送；而在325之后的Pixel版本，單條信息默認(rèn)最多可以發(fā)送7K數(shù)據(jù)量，非常方便的解決了代碼部署中單條信息過(guò)載的問(wèn)題。
當(dāng)用戶在離線狀態(tài)下使用APP時(shí)，數(shù)據(jù)由于無(wú)法聯(lián)網(wǎng)而發(fā)出，導(dǎo)致正常時(shí)間內(nèi)的數(shù)據(jù)統(tǒng)計(jì)分析延遲。直到該設(shè)備下次聯(lián)網(wǎng)時(shí)，數(shù)據(jù)才能被發(fā)出并歸入當(dāng)時(shí)的時(shí)間。這就產(chǎn)生了不同時(shí)間看相同歷史時(shí)間的數(shù)據(jù)時(shí)會(huì)發(fā)生數(shù)據(jù)有出入。
在數(shù)據(jù)采集階段，數(shù)據(jù)分析師需要更多的了解數(shù)據(jù)生產(chǎn)和采集過(guò)程中的異常情況，如此才能更好的追本溯源。另外，這也能很大程度上避免“垃圾數(shù)據(jù)進(jìn)導(dǎo)致垃圾數(shù)據(jù)出”的問(wèn)題。
jerrystone
1、對(duì)等網(wǎng)絡(luò)建立； 2、常用測(cè)試工具使用； 3、基于服務(wù)器網(wǎng)絡(luò)建立與應(yīng)用； 4、Window 2000用戶管理； 5、文件服務(wù)器、打印服務(wù)器、DCHP服務(wù)器\wins服務(wù)器； 6、DNS服務(wù)器、web服務(wù)器、FTP服務(wù)器、MAIL服務(wù)器第三方工具\(yùn)NNTP服務(wù)器的配置與管理； 7、代理服務(wù)器、終端服務(wù)器\Telent服務(wù)器； 8、配置INTERNET服務(wù)器，以及安全與維護(hù)。網(wǎng)絡(luò)工程師人才培養(yǎng)
肥仔美金
1.大數(shù)據(jù)工程師工作中會(huì)做什么？集群運(yùn)維：安裝、測(cè)試、運(yùn)維各種大數(shù)據(jù)組件數(shù)據(jù)開(kāi)發(fā)：細(xì)分一點(diǎn)的話會(huì)有ETL工程師、數(shù)據(jù)倉(cāng)庫(kù)工程師等數(shù)據(jù)系統(tǒng)開(kāi)發(fā)：偏重Web系統(tǒng)開(kāi)發(fā)，比如報(bào)表系統(tǒng)、推薦系統(tǒng)等這里面有很多內(nèi)容其實(shí)是十分重合的，下面大致聊一下每一塊內(nèi)容大致需要學(xué)什么，以及側(cè)重點(diǎn)。2.集群運(yùn)維數(shù)據(jù)工程師，基本上是離不開(kāi)集群搭建，比如hadoop、Spark、Kafka，不要指望有專門的運(yùn)維幫你搞定，新組件的引入一般都要自己來(lái)動(dòng)手的。因此這就要求數(shù)據(jù)工程師了解各種大數(shù)據(jù)的組件。由于要自己的安裝各種開(kāi)源的組件，就要求數(shù)據(jù)工程師要具備的能力： Linux 。要對(duì)Linux比較熟悉，能各種自己折騰著玩。由于現(xiàn)在的大數(shù)據(jù)生態(tài)系統(tǒng)基本上是 JVM系的，因此在語(yǔ)言上，就不要猶豫了，JVM系的Java和Scala基本上跑不掉，Java基本上要學(xué)的很深，Scala就看情況了。3. ETLETL在大數(shù)據(jù)領(lǐng)域主要體現(xiàn)在各種數(shù)據(jù)流的處理。這一塊一方面體現(xiàn)在對(duì)一些組件的了解上，比如Sqoop、Flume、Kafka、Spark、MapReduce;另一方面就是編程語(yǔ)言的需要，Java、Shell和Sql是基本功。4.系統(tǒng)開(kāi)發(fā)我們大部分的價(jià)值最后都會(huì)由系統(tǒng)來(lái)體現(xiàn)，比如報(bào)表系統(tǒng)和推薦系統(tǒng)。因此就要求有一定的系統(tǒng)開(kāi)發(fā)能力，最常用的就是 Java Web這一套了，當(dāng)然Python也是挺方便的。需要注意的是，一般數(shù)據(jù)開(kāi)發(fā)跑不掉的就是各種提數(shù)據(jù)的需求，很多是臨時(shí)和定制的需求，這種情況下， Sql就跑不掉了，老老實(shí)實(shí)學(xué)一下Sql很必要。如何入門？前面提到了一些數(shù)據(jù)工程師會(huì)用到的技能樹(shù)，下面給一個(gè)入門的建議，完全個(gè)人意見(jiàn)。1.了解行業(yè)情況剛開(kāi)始一定要了解清楚自己和行業(yè)的情況，很多人根本就分不清招聘信息中的大數(shù)據(jù)和數(shù)據(jù)挖掘的區(qū)別就說(shuō)自己要轉(zhuǎn)行，其實(shí)是很不負(fù)責(zé)的。不要總是趕熱點(diǎn)，反正我就是經(jīng)常被鄙視做什么大數(shù)據(jù)開(kāi)發(fā)太Low，做數(shù)據(jù)就要做數(shù)據(jù)挖掘，不然永遠(yuǎn)都是水貨。2.選擇學(xué)習(xí)途徑如果真是清楚自己明確地想轉(zhuǎn)數(shù)據(jù)開(kāi)發(fā)了，要考慮一下自己的時(shí)間和精力，能拿出來(lái)多少時(shí)間，而且在學(xué)習(xí)的時(shí)候最好有人能多指點(diǎn)下，不然太容易走彎路了。在選擇具體的學(xué)習(xí)途徑時(shí)，要慎重一點(diǎn)，有幾個(gè)選擇：自學(xué)報(bào)班找人指點(diǎn)別的不說(shuō)了，報(bào)班是可以考慮的，不要全指望報(bào)個(gè)輔導(dǎo)班就能帶你上天，但是可以靠他幫你梳理思路。如果有專業(yè)從事這一行的人多幫幫的話，是最好的。不一定是技術(shù)好，主要是可溝通性強(qiáng)。3.學(xué)習(xí)路線學(xué)習(xí)路線，下面是一個(gè)大致的建議：第一階段先具備一定的Linux和Java的基礎(chǔ)，不一定要特別深，先能玩起來(lái)，Linux的話能自己執(zhí)行各種操作，Java能寫點(diǎn)小程序。這些事為搭建Hadoop環(huán)境做準(zhǔn)備。學(xué)習(xí)Hadoop，學(xué)會(huì)搭建單機(jī)版的Hadoop，然后是分布式的Hadoop，寫一些MR的程序。接著學(xué)學(xué)Hadoop生態(tài)系統(tǒng)的其它大數(shù)據(jù)組件，比如Spark、Hive、Hbase，嘗試去搭建然后跑一些官網(wǎng)的Demo。Linux、Java、各種組件都有一些基礎(chǔ)后，要有一些項(xiàng)目方面的實(shí)踐，這時(shí)候找一些成功案例，比如搜搜各種視頻教程中如何搞一個(gè)推薦系統(tǒng)，把自己學(xué)到的用起來(lái)。第二階段到這里是一個(gè)基本的階段了，大致對(duì)數(shù)據(jù)開(kāi)發(fā)有一些了解了。接著要有一些有意思內(nèi)容可以選學(xué)。數(shù)據(jù)倉(cāng)庫(kù)體系：如何搞數(shù)據(jù)分層，數(shù)據(jù)倉(cāng)庫(kù)體系該如何建設(shè)，可以有一些大致的了解。用戶畫像和特征工程：這一部分越早了解越好。一些系統(tǒng)的實(shí)現(xiàn)思路：比如調(diào)度系統(tǒng)、元數(shù)據(jù)系統(tǒng)、推薦系統(tǒng)這些系統(tǒng)如何實(shí)現(xiàn)。第三階段下面要有一些細(xì)分的領(lǐng)域需要深入進(jìn)行，看工作和興趣來(lái)選擇一些來(lái)深入進(jìn)行分布式理論：比如Gossip、DHT、Paxo這些構(gòu)成了各種分布式系統(tǒng)的底層協(xié)議和算法，還是要學(xué)一下的。數(shù)據(jù)挖掘算法：算法是要學(xué)的，但是不一定純理論，在分布式環(huán)境中實(shí)現(xiàn)算法，本身就是一個(gè)大的挑戰(zhàn)。各種系統(tǒng)的源碼學(xué)習(xí)：比如Hadoop、Spark、Kafka的源碼，想深入搞大數(shù)據(jù)，源碼跑不掉。
笨笨的2003
這個(gè)要看你的具體情況了，哪個(gè)培訓(xùn)部不一樣的，所選的課程也不一樣。我只是介紹下了：郭春柱編著的4本書:網(wǎng)絡(luò)工程師考試案例 網(wǎng)絡(luò)工程師動(dòng)手實(shí)驗(yàn)營(yíng) 網(wǎng)絡(luò)工程師考前沖刺指南 2009年8月份準(zhǔn)備又出一本，就四本了，名字不知道自己留意?？赡苁菫?1月份考試準(zhǔn)備的。今年的5月份考試在他《網(wǎng)絡(luò)工程師動(dòng)手實(shí)練營(yíng)》其中有些和試題類似（這些事情你應(yīng)該清楚吧）網(wǎng)絡(luò)工程師歷年試題分析與解答 清華大學(xué)出版社 （必備，這本書最重要，出版日期越新越好）2004和2009網(wǎng)絡(luò)工程師考綱（必備，作對(duì)比用）網(wǎng)絡(luò)工程師沖刺指南（第二版）徐峰編著 電子工業(yè)出版社（必備，這本書從2月到5月我都在翻）網(wǎng)絡(luò)工程師考試題型精解與全真練習(xí)徐峰編著 電子工業(yè)出版社（必備，我唯一一本模擬題輔導(dǎo)資料，反復(fù)做了好多遍）計(jì)算機(jī)網(wǎng)絡(luò)（第五版） 謝希仁編著 電子工業(yè)出版社 （建議，聽(tīng)說(shuō)沒(méi)基礎(chǔ)的要多看）《網(wǎng)絡(luò)工程師教程》 雷震甲主編 清華大學(xué)出版社 （必備，網(wǎng)上很多人說(shuō)把它當(dāng)詞典翻，不過(guò)都以他作為標(biāo)準(zhǔn)，我像是的，太深?yuàn)W沒(méi)有人能夠完全看完的）網(wǎng)絡(luò)工程師考試考前串講 希賽的電子工業(yè)出版社 （考前一個(gè)星期一定要看，很有收獲?。┚W(wǎng)絡(luò)工程師考試試題分類精解 希賽的電子工業(yè)出版社 （考前一個(gè)星期也要看?。┚W(wǎng)絡(luò)工程師考前同步輔導(dǎo) 清華大學(xué)出版社 （有興趣就去看下，我買來(lái)基本上是放在一邊，覺(jué)得里面的知識(shí)都過(guò)時(shí)啦）Red hat linux9 系統(tǒng)管理 朱居正著 清華大學(xué)出版社（學(xué)習(xí)linux時(shí)我就看這本書）下面四本書：你遇到不懂時(shí)就去參考下最好能借，買的話太貴了《CCNA 1 網(wǎng)絡(luò)基礎(chǔ)》《CCNA 2 路由器與路由基礎(chǔ)》《CCNA 3 交換基礎(chǔ)與中級(jí)路由》《CCNA 4 廣域網(wǎng)》
優(yōu)質(zhì)工程師考試問(wèn)答知識(shí)庫(kù)