數(shù)據(jù)量大導(dǎo)致索引失效應(yīng)該怎么辦？?jī)?yōu)化查詢，盡量避免全表掃描，避免索引失效。判斷wh物聯(lián)網(wǎng)時(shí)代的數(shù)據(jù)庫(kù)如何選型？在物聯(lián)網(wǎng)時(shí)代，大量的數(shù)據(jù)產(chǎn)生于不同的設(shè)備傳感器，因此單個(gè)數(shù)據(jù)庫(kù)系統(tǒng)可以 我不能存儲(chǔ)這么大量

數(shù)據(jù)量大導(dǎo)致索引失效應(yīng)該怎么辦？

優(yōu)化查詢，盡量避免全表掃描，避免索引失效。

判斷wh

物聯(lián)網(wǎng)時(shí)代的數(shù)據(jù)庫(kù)如何選型？

在物聯(lián)網(wǎng)時(shí)代，大量的數(shù)據(jù)產(chǎn)生于不同的設(shè)備傳感器，因此單個(gè)數(shù)據(jù)庫(kù)系統(tǒng)可以 我不能存儲(chǔ)這么大量的數(shù)據(jù)。在選擇數(shù)據(jù)庫(kù)時(shí)，我們一定要選擇具有分布式存儲(chǔ)能力的數(shù)據(jù)庫(kù)。

在物聯(lián)網(wǎng)時(shí)代，數(shù)據(jù)之間還有一個(gè)很重要的特征，就是數(shù)據(jù)之間的關(guān)聯(lián)性。互連的互聯(lián)網(wǎng)設(shè)備傳感器產(chǎn)生不同的數(shù)據(jù)。由于不同的傳感器相互連接，共同工作，收集數(shù)據(jù)，如何在數(shù)據(jù)庫(kù)中存儲(chǔ)大量相互關(guān)聯(lián)的數(shù)據(jù)？這里我推薦使用圖形數(shù)據(jù)庫(kù)進(jìn)行存儲(chǔ)。

與其他數(shù)據(jù)庫(kù)相比，圖數(shù)據(jù)庫(kù)最大的優(yōu)點(diǎn)是查詢數(shù)據(jù)之間的相關(guān)性會(huì)更快，耗時(shí)更少。例如，在社交網(wǎng)絡(luò)中，我們想要找出在用戶A的粉絲中，粉絲關(guān)注用戶b。如果使用傳統(tǒng)的關(guān)系數(shù)據(jù)庫(kù)來(lái)存儲(chǔ)用戶 顧慮，在上面的數(shù)據(jù)統(tǒng)計(jì)中，計(jì)算結(jié)果需要兩層Join，但是關(guān)系數(shù)據(jù)庫(kù)的Join操作會(huì)很慢。如果你使用一個(gè)圖形數(shù)據(jù)庫(kù)來(lái)存儲(chǔ)數(shù)據(jù)，圖中的點(diǎn)是用戶，邊是用戶 擔(dān)憂。當(dāng)你查詢A的粉絲，粉絲也關(guān)注B的用戶時(shí)，只需要遍歷兩級(jí)關(guān)注就能快速得到結(jié)果。

圖形數(shù)據(jù)庫(kù)也屬于NoSql數(shù)據(jù)庫(kù)的一種。常用的圖形數(shù)據(jù)庫(kù)有JanusGraph、Secondary、Cayley和d graph。不同的圖形數(shù)據(jù)庫(kù)有不同的底層實(shí)現(xiàn)。

JanusGraph是一個(gè)分布式圖形數(shù)據(jù)庫(kù)，用Java語(yǔ)言開發(fā)。Hadoop生態(tài)存儲(chǔ)系統(tǒng)可以作為數(shù)據(jù)源構(gòu)建大數(shù)據(jù)圖。是TiTan graph數(shù)據(jù)庫(kù)的開源版本，支持事務(wù)性ACID。

Secondary是單機(jī)圖形數(shù)據(jù)庫(kù)，優(yōu)點(diǎn)是可以快速安裝使用，很容易出新。學(xué)生入門。如果你的數(shù)據(jù)量普遍較小，我推薦使用Secondary?？梢灾苯邮褂枚蜗嚓P(guān)的API來(lái)構(gòu)建數(shù)據(jù)模型圖，然后使用二次Cypher查詢語(yǔ)言來(lái)分析數(shù)據(jù)。Cypher是一種類似SQL的語(yǔ)言。

Cayley和Dgraph都是用Go語(yǔ)言實(shí)現(xiàn)的圖形數(shù)據(jù)庫(kù)，Go語(yǔ)言最大的特點(diǎn)就是編譯速度快，開發(fā)方便。Cayley和Dgraph都支持分布式存儲(chǔ)，但都不支持SQL語(yǔ)言查詢數(shù)據(jù)，Dgraph不支持事務(wù)，Cayley支持事務(wù)。但在開源社區(qū)中，Dgraph比Cayley更活躍，建議先用Dgraph作為物聯(lián)網(wǎng)的存儲(chǔ)數(shù)據(jù)庫(kù)。

總的來(lái)說(shuō)，在物聯(lián)網(wǎng)時(shí)代，一定要學(xué)會(huì)使用圖數(shù)據(jù)庫(kù)，在分析大量數(shù)據(jù)之間的相關(guān)性時(shí)，圖數(shù)據(jù)庫(kù)可以派上用場(chǎng)。圖形數(shù)據(jù)庫(kù)最大的優(yōu)勢(shì)是分析不同數(shù)據(jù)之間的相關(guān)性。

我 m湖，專注于大數(shù)據(jù)技術(shù)、互聯(lián)網(wǎng)技術(shù)洞察和程序員個(gè)人經(jīng)驗(yàn)分享。如果我的問(wèn)答對(duì)你有幫助，希望你能喜歡轉(zhuǎn)發(fā)或者關(guān)注我，也就是我繼續(xù)分享我關(guān)于大數(shù)據(jù)的知識(shí)。謝謝您們。