mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過(guò)1億，而且還在

mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？

在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過(guò)1億，而且還在增加，建議按以下方式處理：

1子表。它可以按時(shí)間或一定的規(guī)則進(jìn)行拆分，以便盡可能地查詢子表中的數(shù)據(jù)庫(kù)。這是最有效的方法。特別是寫，放入一個(gè)新表，并定期同步。如果記錄不斷更新，最好將寫入的數(shù)據(jù)放在redis中，并定期同步表3的大文本字段，將它們分隔成一個(gè)新的獨(dú)立表。對(duì)于較大的文本字段，可以使用NoSQL數(shù)據(jù)庫(kù)

4優(yōu)化體系結(jié)構(gòu)，或者優(yōu)化SQL查詢，避免聯(lián)合表查詢，盡量不要使用count（*）、in、recursion等性能消耗語(yǔ)句

5使用內(nèi)存緩存，或者在前端讀取時(shí)增加緩存數(shù)據(jù)庫(kù)。重復(fù)讀取時(shí)，直接從緩存中讀取。

以上是一種低成本的管理方法，基本上幾個(gè)服務(wù)器就可以做到，但是管理起來(lái)有點(diǎn)麻煩。

當(dāng)然，如果總的數(shù)據(jù)量特別大，而且您不關(guān)心投資成本，可以使用cluster或tidb

這個(gè)問(wèn)題大致可以分為兩種情況：[1]只能使用index返回查詢結(jié)果的查詢，如聚合查詢中的count、Max、min函數(shù)。

2. 當(dāng)查詢結(jié)果中的記錄數(shù)小于表中記錄數(shù)的一定比例時(shí)。這主要是因?yàn)樗饕械闹羔樣糜谠谒饕龗呙韬笾饌€(gè)訪問(wèn)記錄。假設(shè)每個(gè)記錄都是通過(guò)索引訪問(wèn)的，則讀取磁盤的次數(shù)就是查詢T的記錄數(shù)。如果掃描表，則讀取磁盤的次數(shù)就是存儲(chǔ)記錄B的塊數(shù)。如果T>B，則索引沒(méi)有優(yōu)勢(shì)。對(duì)于大多數(shù)數(shù)據(jù)庫(kù)，這個(gè)比率是10%（Oracle、PostgreSQL等），也就是說(shuō)，首先估計(jì)結(jié)果的數(shù)量。如果小于此比率，請(qǐng)使用索引。如果大于此比率，則直接掃描表格。

在mysql中，什么情況下使用全表掃描要比使用索引快？

要了解mysql中有兩種鎖，共享鎖和獨(dú)占鎖，即讀鎖和寫鎖。MySQL遵循acid特性，即MySQL的所有操作都是原子的。然后MySQL在讀寫時(shí)會(huì)根據(jù)作用域進(jìn)行鎖定。讀取時(shí)自動(dòng)添加讀鎖，寫入時(shí)自動(dòng)添加寫鎖?，F(xiàn)在您正在掃描整個(gè)表，整個(gè)表將被讀取并鎖定。但是，其他用戶也可以讀取此表的數(shù)據(jù)，但不能寫入。另一個(gè)例外是MySQL實(shí)現(xiàn)了這種機(jī)制。當(dāng)您掃描整個(gè)表時(shí)，我們可以在表的末尾插入數(shù)據(jù)，因?yàn)樵诖鎯?chǔ)方面，它沒(méi)有被鎖定。你看到了嗎？