hadoop通俗點(diǎn)說(shuō)是什么應(yīng)該怎么學(xué)有哪些前提的知識(shí)條件嗎 通俗的說(shuō)就是 假如說(shuō)你有一個(gè)籃子水果，你想知道蘋果和梨的數(shù)量是多少內(nèi)，那么只要一個(gè)一個(gè)數(shù)就容可以知道有多少了。 如果你有一個(gè)集裝箱水果，這時(shí)候就需要很多人同時(shí)幫你數(shù)了，這相當(dāng)于多進(jìn)程或多線程。 如果你很多個(gè)集裝箱的水果，這時(shí)就需要分布式計(jì)算了，也就是Hadoop。 Apache Hadoop是入門點(diǎn)，或者我們可以說(shuō)是進(jìn)入整個(gè)大數(shù)據(jù)生態(tài)系統(tǒng)的基礎(chǔ)。它是大數(shù)據(jù)生態(tài)系統(tǒng)中大多數(shù)高級(jí)工具，應(yīng)用程序和框架的基礎(chǔ)，但是在學(xué)習(xí)Apache Hadoop時(shí)，還需要事先知道一些事情。 開始學(xué)習(xí)Apache Hadoop沒(méi)有嚴(yán)格的先決條件。但是，它使事情更容易，如果你想成為和Apache Hadoop的專家，這些是很好的知道的東西。 因此，Apache Hadoop的幾個(gè)非?；镜南葲Q條件是：Java Linux SQL cloudera的hadoop認(rèn)證具體考什么啊，在哪報(bào)名啊什么時(shí)候考啊去哪咨詢啊Cloudera的Hadoop認(rèn)證目前包括兩類：開發(fā)員和管理員。而這兩個(gè)認(rèn)證考試和其相應(yīng)Hadoop培訓(xùn)課程往往是綁定在一起的。 不用多說(shuō)，Cloudera大有發(fā)展成為Hadoop領(lǐng)域RedHat之趨勢(shì)，其提供的認(rèn)證考試自然會(huì)考核到那些非常重要的知識(shí)點(diǎn)和技能。他們的開發(fā)員資格證書和管理員資格證書在全球業(yè)內(nèi)是目前唯一的也自然是最具權(quán)威性的。目前我們正處在大數(shù)據(jù)時(shí)代，企業(yè)要向“數(shù)據(jù)驅(qū)動(dòng)”模式轉(zhuǎn)換，Hadoop人才需求很大，但是國(guó)內(nèi)外Hadoop人才短缺。國(guó)外譬如Oracle，Apple和HP等都不再坐等合適的具有Hadoop技能的應(yīng)聘者上門，而是逐漸采取派遣其員工參加Cloudera的Hadoop培訓(xùn)和認(rèn)證考試。 綜上所述，回答是Cloudera的Hadoop培訓(xùn)和認(rèn)證非常有用：1）獲得了讓大家信得過(guò)的Hadoop技能 2）所以，在其他條件相同的情況下，用人單位會(huì)更相信以及會(huì)優(yōu)先考慮持有Cloudera認(rèn)證的工程師，為企業(yè)保障了Hadoop人員的質(zhì)量，而這對(duì)個(gè)人的職業(yè)發(fā)展也無(wú)疑將是很大的幫助。 BTW，等拿到了證書，加入他們?cè)贚inkedin上的認(rèn)證群，也許會(huì)經(jīng)常被不乏國(guó)內(nèi)外知名公司的眾獵頭所“騷擾”，這算不算的上也是一個(gè)好處呢 :) 剛?cè)肼?java 上級(jí)領(lǐng)導(dǎo)給可我一個(gè)任務(wù) 用mybatis實(shí)現(xiàn)Hadoop 的M/R map/rece 我都懵了 求廣大網(wǎng)友給思路 你提供的連接里不是說(shuō)了么，map rece借用了函數(shù)響應(yīng)式編程的概念，我覺得你回可以參考一答些函數(shù)響應(yīng)式編程的框架（不過(guò)這個(gè)東西真心難），我覺得這個(gè)任務(wù)你一個(gè)人肯定沒(méi)法搞出來(lái)的吧，mybatis也就寫寫需求做做業(yè)務(wù)，你是不是得罪領(lǐng)導(dǎo)了。。 Hadoop是什么找工作容易嗎 找工作還是不容易的 你要去人才市場(chǎng) 那邊工作多 不過(guò)很多面試嚴(yán)格的 Hadoop是什么要學(xué)多長(zhǎng)時(shí)間 Hadoop是一個(gè)由Apache基金會(huì)所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu)。用戶可以在不了解分布式底層專細(xì)節(jié)的情屬?zèng)r下，開發(fā)分布式程序。充分利用集群的威力進(jìn)行高速運(yùn)算和存儲(chǔ)。 Hadoop實(shí)現(xiàn)了一個(gè)分布式文件系統(tǒng)（Hadoop Distributed File System），簡(jiǎn)稱HDFS。HDFS有高容錯(cuò)性的特點(diǎn)，并且設(shè)計(jì)用來(lái)部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）來(lái)訪問(wèn)應(yīng)用程序的數(shù)據(jù)，適合那些有著超大數(shù)據(jù)集（large data set）的應(yīng)用程序。HDFS放寬了（relax）POSIX的要求，可以以流的形式訪問(wèn)（streaming access）文件系統(tǒng)中的數(shù)據(jù)。 至少你要有J2EE開發(fā)經(jīng)驗(yàn)再學(xué)hadoop，這是基于JAVA上的框架應(yīng)用。大概要學(xué)幾個(gè)月，看個(gè)人了，主要是分布式架構(gòu)，數(shù)據(jù)挖掘等東西。 從事大數(shù)據(jù)分析相關(guān)工作，需要具備什么條件 1.你需要有應(yīng)用數(shù)學(xué)、統(tǒng)計(jì)學(xué)、數(shù)量經(jīng)濟(jì)學(xué)專業(yè)本科或者工學(xué)碩士層次水平的數(shù)學(xué)知識(shí)版背景。 2、至少權(quán)熟練SPSS、STATISTIC、Eviews、SAS等數(shù)據(jù)分析軟件中的一門。 3、至少能夠用Acess等進(jìn)行數(shù)據(jù)庫(kù)開發(fā)； 4、至少掌握一門數(shù)學(xué)軟件：matalab，mathmatics進(jìn)行新模型的構(gòu)建。 5、至少掌握一門編程語(yǔ)言，如Python； 6、數(shù)據(jù)庫(kù)語(yǔ)言 1）熟悉Linux操作系統(tǒng)及至少一種腳本語(yǔ)言(Shell/Perl/Python)； 2）有分布式平臺(tái)（如Hadoop）開發(fā)經(jīng)驗(yàn)者優(yōu)先； 3）熟悉數(shù)據(jù)庫(kù)原理及SQL基本操作。 Hadoop是什么好找工作嗎 去年學(xué)的，不容易，自己基礎(chǔ)也差但是功夫不負(fù)有心人，現(xiàn)在有所成績(jī)。到魔據(jù)條件不錯(cuò)，很注重基礎(chǔ)教育，看合不合適。如果沒(méi)有基礎(chǔ)一般需要5個(gè)月，雖然剛開始有些枯燥，薪資不錯(cuò)。 求問(wèn)從事大數(shù)據(jù)相關(guān)工作的入職門檻是什么 世界正從IT時(shí)代走向DT時(shí)代，未來(lái)是大數(shù)據(jù)的時(shí)代，企業(yè)最有價(jià)值的資產(chǎn)就是數(shù)據(jù)，你所擁有版的數(shù)據(jù)越多你就越權(quán)有說(shuō)話權(quán)，因此未來(lái)企業(yè)里最牛逼的員工應(yīng)該是和數(shù)據(jù)有關(guān)的職位，比如數(shù)據(jù)科學(xué)家、數(shù)據(jù)分析師、數(shù)據(jù)工程師等，這些職位或?qū)⒊蔀槌绦騿T又一個(gè)美好的出路。 CDO主要負(fù)責(zé)利用數(shù)據(jù)推進(jìn)企業(yè)與社會(huì)的對(duì)話，挖掘企業(yè)海量數(shù)據(jù)中潛在的價(jià)值，并運(yùn)營(yíng)和管理好數(shù)據(jù)，為企業(yè)戰(zhàn)略、營(yíng)銷和管理決策提供參考，CDO的能力不僅僅是大數(shù)據(jù)領(lǐng)域的范疇，他需要同時(shí)具有IT、市場(chǎng)營(yíng)銷、運(yùn)營(yíng)管理等綜合素質(zhì)。 “數(shù)據(jù)科學(xué)家是指運(yùn)用統(tǒng)計(jì)分析、機(jī)器學(xué)習(xí)、分布式處理等技術(shù)，從大數(shù)據(jù)中提取出對(duì)業(yè)務(wù)有意義的信息，以簡(jiǎn)單易懂的形式傳達(dá)給決策者，并創(chuàng)造出新的數(shù)據(jù)運(yùn)用服務(wù)的人才。 數(shù)據(jù)分析師能洞悉一個(gè)方程式的商業(yè)意義，他們知道如何提出正確的問(wèn)題，非常善于數(shù)據(jù)分析，數(shù)據(jù)可視化和數(shù)據(jù)呈現(xiàn)。 數(shù)據(jù)工程師是能運(yùn)行基本數(shù)據(jù)模型，充分了解文件系統(tǒng)，分布式計(jì)算與大型數(shù)據(jù)庫(kù)，他們是能提供可建模數(shù)據(jù)所需平臺(tái)的人。 Hadoop是什么容易就業(yè)嗎 08年云計(jì)算到現(xiàn)在的大數(shù)據(jù)……還停留在搭建環(huán)境階段的同學(xué)……內(nèi)什么我就不吐槽了，現(xiàn)在任何公司是個(gè)人有兩三天就會(huì)搭建環(huán)境了。 現(xiàn)在一線的人才狀況是： 普遍需要2-3年hadoop經(jīng)驗(yàn)的大牛，如果你只會(huì)搭建環(huán)境，那基本是沒(méi)人想帶你的。 當(dāng)然，如果你基礎(chǔ)非常扎實(shí)又肯干，那機(jī)會(huì)還是相當(dāng)多的。 理解大數(shù)據(jù)的話就知道它和hadoop之間沒(méi)有必然聯(lián)系，甚至可以說(shuō)沒(méi)有很直接的聯(lián)系。 不去盲目的追求任何一種技術(shù)，而是通過(guò)自己的實(shí)踐觀察，在實(shí)際的體驗(yàn)和業(yè)務(wù)中將技術(shù)融會(huì)貫通，舊的是基石，新的是提煉，hadoop也不過(guò)是Google論文下的一只小蝦米，僅此而已，認(rèn)清楚自己和技術(shù)的關(guān)系才最為重要，技術(shù)永遠(yuǎn)是你用來(lái)提升對(duì)這個(gè)社會(huì)理解的小工具，情商永遠(yuǎn)比智商重要。 怎么才能學(xué)好Hadoop，進(jìn)入云的世界，這里給幾點(diǎn)建議： 1. 打好你的Java基礎(chǔ)，C我就不說(shuō)了，那是基本功。 2. 詳細(xì)研究，理解一下現(xiàn)在大型網(wǎng)站包括Sina，騰訊網(wǎng)（門戶），Weibo（微博），天貓，京東（電商）的架構(gòu)與實(shí)現(xiàn)，先從自己的角度去理解，然后去跟實(shí)際情況做比對(duì)，提升自己對(duì)數(shù)據(jù)和技術(shù)的敏感程度。在這個(gè)階段，如果能分門別類的規(guī)劃出不同類型網(wǎng)站的需求和使用的特定方向的技術(shù)，對(duì)“云”和“大數(shù)據(jù)”的理解就更加透徹而非表層停留。 3. 科班的同學(xué)，在學(xué)校的以基礎(chǔ)為根基，在公司的以業(yè)務(wù)為導(dǎo)向，這樣的技術(shù)才不盲目，這樣的技術(shù)才腳踏實(shí)地。 對(duì)很多人來(lái)說(shuō)，技術(shù)都不是一生的職業(yè)導(dǎo)向，那么，提升自己的眼界，站在更高的角度思考問(wèn)題就顯得尤為重要，從自己，到團(tuán)隊(duì)，公司，再到整個(gè)業(yè)界，眼界寬廣了，技術(shù)也就是你的左膀右臂。 hadoop只是云計(jì)算的一隅，任何東西學(xué)的深入了都會(huì)發(fā)生質(zhì)變。更多的云，可以去學(xué)習(xí)一下Amazon，Openstack，。書的話，大象那本書入門，然后對(duì)hadoop仍然感興趣的話，建議直接進(jìn)到源碼中去。 Hadoop培訓(xùn)后就業(yè)前景，薪資怎么樣 Hadoop工程師是目前BAT企業(yè)、大數(shù)據(jù)公司最急需的人才。那hadoop培訓(xùn)出來(lái)的就業(yè)前景和薪資怎么樣呢？ Hadoop能學(xué)到什么 主要學(xué)習(xí)hadoop中的四大框架:hdfs、maprece、hive、hbase。這四大框架是hadoop最最核心的，學(xué)習(xí)難度最大的，也是應(yīng)用最廣泛的。除此之外，還有其他的框架，會(huì)根據(jù)社會(huì)需要在課程中考慮是否增加其他框架的教學(xué)。 給hadoop新手的一封信:Hadoop入門自學(xué)及對(duì)就業(yè)的幫助 關(guān)于就業(yè)前景的問(wèn)題 hadoop云計(jì)算的基礎(chǔ)。絕大部分的云計(jì)算中的分布式存儲(chǔ)和計(jì)算都是使用Hadoop的。簡(jiǎn)單的理解的話，云計(jì)算是系統(tǒng)工程的藍(lán)圖，Hadoop是基礎(chǔ)層面的重要的必不可少的工具。并且，云計(jì)算在國(guó)家十二五規(guī)劃中也有重要章節(jié)討論，全國(guó)各省市都有自己的云計(jì)算發(fā)展規(guī)劃。云計(jì)算已經(jīng)被提高到國(guó)家中長(zhǎng)期發(fā)展戰(zhàn)略規(guī)劃中，大家可以想象以后Hadoop和云計(jì)算的崗位有多少。Hadoop工程師是目前BAT企業(yè)、大數(shù)據(jù)公司最急需的人才。 畢業(yè)后的薪酬如何 起薪拿到10k左右還是很正常的。當(dāng)然，這個(gè)要跟個(gè)人能力、面試技巧、入職的公司等都有關(guān)系。大家可以參考一下招聘網(wǎng)站上的Hadoop相關(guān)職位給出的薪資，月薪15000很正常哦。 學(xué)習(xí)Hadoop需要什么基礎(chǔ) Hadoop需要具備javaSE的基礎(chǔ)知識(shí)，對(duì)于javaEE(jsp/servlet/三大框架)沒(méi)有要求。需要熟練使用linux系統(tǒng)(第一天課程有復(fù)習(xí)linux操作的時(shí)間)。大體上，有這些預(yù)備知識(shí)就夠了。嚴(yán)格的說(shuō)，只需要具備javaSE知識(shí)就足夠了。我掌握的javaSE不夠好，行嗎?沒(méi)問(wèn)題!Hadoop中對(duì)java的運(yùn)用是非常淺的，只要跟著老師課堂思路走就行了。非常適合于在校生、剛畢業(yè)的、和已有IT工作經(jīng)驗(yàn)的朋友們，學(xué)習(xí)hadoop比學(xué)習(xí)javaEE的基礎(chǔ)要求低，學(xué)習(xí)難度低。 學(xué)完Hadoop后能達(dá)到什么水平 簡(jiǎn)單概括就是hadoop大數(shù)據(jù)管理員和hadoop開發(fā)工程師。hadoop大數(shù)據(jù)管理員類似于數(shù)據(jù)庫(kù)的dba，負(fù)責(zé)hadoop集群的運(yùn)行維護(hù)工作。hadoop開發(fā)工程師是負(fù)責(zé)編寫hadoop程序的，實(shí)現(xiàn)算法的。相當(dāng)于工作兩三年的水平。 學(xué)完Hadoop會(huì)影響javaEE工作 嚴(yán)格的講，hadoop與javaEE是兩個(gè)不同的發(fā)展思路，hadoop傾向于底層數(shù)據(jù)處理部分，javaEE負(fù)責(zé)系統(tǒng)開發(fā)，二者前后相繼，沒(méi)有交叉，相輔相成。一部分javaEE學(xué)員，入職面試時(shí)是javaEE知識(shí)，入職后立刻要求研究hadoop。大家可以想想社會(huì)的需求是多么迫切，hadoop人才是多么匱乏! 學(xué)習(xí)Hadoop對(duì)算法和數(shù)據(jù)結(jié)構(gòu)要求高嗎? 一般海量數(shù)據(jù)的處理都是自定義存儲(chǔ)結(jié)構(gòu)，實(shí)現(xiàn)自己的算法，這是業(yè)界的通用處理思路。這對(duì)我們普通程序員而言要求還是很高的。hadoop的優(yōu)點(diǎn)就是進(jìn)行了封裝，我們寫的算法都是偏向于業(yè)務(wù)的，不需要?jiǎng)?chuàng)造算法。因此大可放心。但是，大家以后工作的公司可能不使用hadoop去處理大數(shù)據(jù)，這時(shí)候?qū)λ惴ê蛿?shù)據(jù)結(jié)構(gòu)的要求就高了。 總之，大家以一顆平常心對(duì)待學(xué)習(xí)hadoop，安心學(xué)習(xí)。只要堅(jiān)持學(xué)學(xué)習(xí)，等待你們的將是多多的人民幣，有時(shí)候會(huì)超出你的想象!