mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫(xiě)，表中有大文本字段，單服務(wù)器）。現(xiàn)在已經(jīng)超過(guò)1億，而且還在

mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？

在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫(xiě)，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過(guò)1億，而且還在增加，建議按以下方式處理：

1子表。它可以按時(shí)間或一定的規(guī)則進(jìn)行拆分，以便盡可能地查詢(xún)子表中的數(shù)據(jù)庫(kù)。這是最有效的方法。特別是寫(xiě)，放入一個(gè)新表，并定期同步。如果記錄不斷更新，最好將寫(xiě)入的數(shù)據(jù)放在redis中，并定期同步表3的大文本字段，將它們分隔成一個(gè)新的獨(dú)立表。對(duì)于較大的文本字段，可以使用NoSQL數(shù)據(jù)庫(kù)

4優(yōu)化體系結(jié)構(gòu)，或者優(yōu)化SQL查詢(xún)，避免聯(lián)合表查詢(xún)，盡量不要使用count（*）、in、recursion等性能消耗語(yǔ)句

5使用內(nèi)存緩存，或者在前端讀取時(shí)增加緩存數(shù)據(jù)庫(kù)。重復(fù)讀取時(shí)，直接從緩存中讀取。

以上是一種低成本的管理方法，基本上幾個(gè)服務(wù)器就可以做到，但是管理起來(lái)有點(diǎn)麻煩。

當(dāng)然，如果整體數(shù)據(jù)量特別大，我們也不在乎投資成本，那就用cluster和tidb吧

正如房東所說(shuō)，分頁(yè)查詢(xún)?cè)谖覀兊膶?shí)際應(yīng)用中非常普遍，也是最容易出現(xiàn)問(wèn)題的查詢(xún)場(chǎng)景。例如，對(duì)于下面的簡(jiǎn)單語(yǔ)句，通常的思考方式是在name、age、register中u在time字段上創(chuàng)建一個(gè)復(fù)合索引。這樣，條件排序可以有效地利用索引，性能得到快速提高。

如上例所示，當(dāng)limit子句變?yōu)椤發(fā)imit 100000，50”時(shí)，我們會(huì)發(fā)現(xiàn)，如果只選擇了50條語(yǔ)句，為什么會(huì)變慢？

，所以我們會(huì)覺(jué)得很慢。

為什么MySQL在數(shù)據(jù)庫(kù)較大的時(shí)候分頁(yè)查詢(xún)很慢，如何優(yōu)化？

1。優(yōu)化SQL語(yǔ)句、索引、表結(jié)構(gòu)等。打開(kāi)查詢(xún)緩存時(shí)，查詢(xún)緩存緩存選擇查詢(xún)及其結(jié)果數(shù)據(jù)集。當(dāng)執(zhí)行同一個(gè)select查詢(xún)時(shí)，MySQL將直接從內(nèi)存中檢索結(jié)果，這加快了查詢(xún)的執(zhí)行速度，減少了對(duì)數(shù)據(jù)庫(kù)的壓力。執(zhí)行show變量，比如“have”uqueryucache，您可以檢查MySQL查詢(xún)緩存是否打開(kāi)。要打開(kāi)查詢(xún)緩存，只需配置我的.cnf具體如下：

querycacheuuutype=1

querycacheuusize=128M

querycacheulimit=1m

保存后重新啟動(dòng)mysql。

3. 選擇InnoDB存儲(chǔ)引擎。MySQL常用的存儲(chǔ)引擎是MyISAM和InnoDB。它們之間的區(qū)別如下：

MyISAM

查詢(xún)速度快；

支持表級(jí)鎖，在此期間不能對(duì)表執(zhí)行其他操作；

支持全文檢索；

支持?jǐn)?shù)據(jù)壓縮、自復(fù)制、查詢(xún)緩存和數(shù)據(jù)加密；

不支持外鍵；

不支持事務(wù)，因此沒(méi)有提交和回滾操作；

不支持群集數(shù)據(jù)庫(kù)。

InnoDB

支持行級(jí)鎖；

支持外鍵和外鍵約束強(qiáng)制執(zhí)行；

支持事務(wù)，可以執(zhí)行提交和回滾操作；

支持?jǐn)?shù)據(jù)壓縮、自復(fù)制、查詢(xún)緩存和數(shù)據(jù)加密；

可以在群集環(huán)境中使用，但不完全支持。InnoDB表可以轉(zhuǎn)換為NDB存儲(chǔ)引擎，可以在集群環(huán)境下使用。