三臺32g 1T固態(tài)，就20萬數(shù)據(jù)用HBase跟SPark比Sql慢太多？為啥？MySQL是一個性能良好的獨(dú)立系統(tǒng)。它基本上是一個沒有任何中間步驟的內(nèi)存操作。所以千萬級的數(shù)據(jù)量一般都是直接的。Hado

三臺32g 1T固態(tài)，就20萬數(shù)據(jù)用HBase跟SPark比Sql慢太多？為啥？

MySQL是一個性能良好的獨(dú)立系統(tǒng)。它基本上是一個沒有任何中間步驟的內(nèi)存操作。所以千萬級的數(shù)據(jù)量一般都是直接的。

Hadoop是一個大型分布式系統(tǒng)。最經(jīng)典的思想是MapReduce，它特別適合處理TB以上的數(shù)據(jù)。實(shí)際上，每道工序都分為許多步驟，既可以調(diào)度大量的機(jī)器，也可以對中間結(jié)果進(jìn)行匯總和計(jì)算。所以當(dāng)數(shù)據(jù)量很小的時候，就特別麻煩了。但一旦數(shù)據(jù)量增加，優(yōu)勢就會出現(xiàn)。