Hadoop如何快速入門(mén)？]A，精通javaseB，會(huì)使用Maven工具C，會(huì)使用IDE（eclipse，idea）d，會(huì)使用Linux系統(tǒng)]（3）HDFS底層工作原理，HDFS編程（4）MapRed

Hadoop如何快速入門(mén)？

]A，精通javase

B，會(huì)使用Maven工具

C，會(huì)使用IDE（eclipse，idea）

d，會(huì)使用Linux系統(tǒng)

]（3）HDFS底層工作原理，HDFS編程

（4）MapReduce原理，MapReduce實(shí)踐

（5）紗線原理與實(shí)踐

（6）zookeeper原理與實(shí)踐（7） HBase，hive，fluming，sqoop原理與實(shí)踐。

https://www.toutiao.com/i6542364732437824003/

Hadoop的原理？

首先，Hadoop框架要求程序員將函數(shù)分為兩部分，即映射和縮減函數(shù)。Map stage：輸入由Map函數(shù)處理得到中間結(jié)果，并通過(guò)Hadoop框架分配給不同的reduce。歸約階段：通過(guò)歸約函數(shù)對(duì)中間結(jié)果進(jìn)行處理，得到最終結(jié)果。以wordcount為例。在map階段，map函數(shù)在每個(gè)單詞后面加1；在reduce階段，reduce函數(shù)在同一個(gè)單詞后面加1。Hadoop框架的排序和分配也可以由用戶定義的函數(shù)控制。

hadoop干什么用的？

主要是分布式文件系統(tǒng)。簡(jiǎn)單地說(shuō)，如果要在服務(wù)器上構(gòu)建集群，可能需要配置和NAS相同的計(jì)算機(jī)，但不需要在不同的服務(wù)器上安裝Hadoop來(lái)實(shí)現(xiàn)集群。在古代，人們用牛拉重物。當(dāng)一頭牛拉不動(dòng)一根木頭時(shí)，他們從來(lái)沒(méi)有想過(guò)要培育更大更強(qiáng)的牛。同樣，我們不需要嘗試開(kāi)發(fā)超級(jí)計(jì)算機(jī)，我們應(yīng)該嘗試結(jié)合使用更多的計(jì)算機(jī)系統(tǒng)。Hadoop是一種能夠?qū)崿F(xiàn)多臺(tái)計(jì)算機(jī)共同計(jì)算數(shù)據(jù)的軟件和平臺(tái)。