mysql表數(shù)據(jù)量太大，達到了1億多條數(shù)據(jù)，除了分庫分表之外，還有沒有其他的解決方式？在正常配置下，MySQL只能承載2000萬數(shù)據(jù)（同時讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過1億，而且還在

mysql表數(shù)據(jù)量太大，達到了1億多條數(shù)據(jù)，除了分庫分表之外，還有沒有其他的解決方式？

在正常配置下，MySQL只能承載2000萬數(shù)據(jù)（同時讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過1億，而且還在增加，建議按以下方式處理：

1子表。它可以按時間或一定的規(guī)則進行拆分，以便盡可能地查詢子表中的數(shù)據(jù)庫。這是最有效的方法。特別是寫，放入一個新表，并定期同步。如果記錄不斷更新，最好將寫入的數(shù)據(jù)放在redis中，并定期同步表3的大文本字段，將它們分隔成一個新的獨立表。對于較大的文本字段，可以使用NoSQL數(shù)據(jù)庫

4優(yōu)化體系結(jié)構(gòu)，或者優(yōu)化SQL查詢，避免聯(lián)合表查詢，盡量不要使用count（*）、in、recursion等性能消耗語句

5使用內(nèi)存緩存，或者在前端讀取時增加緩存數(shù)據(jù)庫。重復(fù)讀取時，直接從緩存中讀取。

以上是一種低成本的管理方法，基本上幾個服務(wù)器就可以做到，但是管理起來有點麻煩。

當(dāng)然，如果總體數(shù)據(jù)量特別大，并且您不關(guān)心投資成本，那么您需要為帶有集群或tidb的MySQL項目設(shè)計一個快速上傳機制。

最終的解決方案是使用MySQL預(yù)處理語句的特性。

MySQL的預(yù)處理語句支持多行數(shù)據(jù)的預(yù)處理，即插入（columnname，columnname，…）值（？,?,...) (?,?,...). 這樣在綁定輸入?yún)?shù)時，就可以在程序中綁定整個表的數(shù)據(jù)，然后調(diào)用一次就可以插入整個表的數(shù)據(jù)，與mysql相比。查詢逐行插入可以節(jié)省幾倍的時間。

但是，如果一次向MySQL服務(wù)器發(fā)送更多數(shù)據(jù)，則應(yīng)設(shè)置我的.ini在一個配置項下，服務(wù)器可以發(fā)送一個數(shù)據(jù)包大小的行。