mysql主從同步 mysql表數(shù)據(jù)量太大,達到了1億多條數(shù)據(jù),除了分庫分表之外,還有沒有其他的解決方式?
mysql表數(shù)據(jù)量太大,達到了1億多條數(shù)據(jù),除了分庫分表之外,還有沒有其他的解決方式?在正常配置下,MySQL只能承載2000萬數(shù)據(jù)(同時讀寫,表中有大文本字段,單服務(wù)器)。現(xiàn)在已經(jīng)超過1億,而且還在
mysql表數(shù)據(jù)量太大,達到了1億多條數(shù)據(jù),除了分庫分表之外,還有沒有其他的解決方式?
在正常配置下,MySQL只能承載2000萬數(shù)據(jù)(同時讀寫,表中有大文本字段,單服務(wù)器)?,F(xiàn)在已經(jīng)超過1億,而且還在增加,建議按以下方式處理:
1子表。它可以按時間或一定的規(guī)則進行拆分,以便盡可能地查詢子表中的數(shù)據(jù)庫。這是最有效的方法。特別是寫,放入一個新表,并定期同步。如果記錄不斷更新,最好將寫入的數(shù)據(jù)放在redis中,并定期同步表3的大文本字段,將它們分隔成一個新的獨立表。對于較大的文本字段,可以使用NoSQL數(shù)據(jù)庫
4優(yōu)化體系結(jié)構(gòu),或者優(yōu)化SQL查詢,避免聯(lián)合表查詢,盡量不要使用count(*)、in、recursion等性能消耗語句
5使用內(nèi)存緩存,或者在前端讀取時增加緩存數(shù)據(jù)庫。重復(fù)讀取時,直接從緩存中讀取。
以上是一種低成本的管理方法,基本上幾個服務(wù)器就可以做到,但是管理起來有點麻煩。
當(dāng)然,如果總體數(shù)據(jù)量特別大,而且您不關(guān)心投資成本,請使用群集或tidb
MySQL數(shù)據(jù)庫使用的是什么類型的數(shù)據(jù)?在MySQL中,有三種類型的數(shù)據(jù)通常用于存儲日期:date、datetime和timestamp。
日期數(shù)據(jù)類型:用于存儲沒有時間的日期。MySQL獲取并以“yyyy-mm-dd”格式顯示此類型。支持的時間范圍是“1000-00-00”到“9999-12-31”。日期時間類型:存儲包含日期和時間的數(shù)據(jù)。存儲和顯示格式為“yyyy-mm-dd HH:mm:SS”。支持的時間范圍是“1000-00-00:00:00”到“9999-12-31 23:59:59”。時間戳類型:它還存儲帶有日期和時間的數(shù)據(jù)。存儲和顯示的格式與datetime相同。支持的時間范圍是“1970-01-01 00:00:01”到“2038-01-19 03:14:07”。所有不符合上述格式的數(shù)據(jù)都將轉(zhuǎn)換為相應(yīng)的0值類型。(0000-00-00或0000-00-00:00:00)
mysql數(shù)據(jù)庫時間用什么類型的數(shù)據(jù)?
必須使用兩種刷新權(quán)限
1。更改密碼。
2. 授權(quán)超級用戶。flush privileges命令的實質(zhì)是將當(dāng)前用戶和權(quán)限表中的用戶信息/權(quán)限設(shè)置從MySQL數(shù)據(jù)庫(MySQL數(shù)據(jù)庫的內(nèi)置數(shù)據(jù)庫)提取到內(nèi)存中。修改MySQL用戶數(shù)據(jù)和權(quán)限后,如果不想重啟MySQL服務(wù)直接生效,需要執(zhí)行此命令。通常,修改根帳戶設(shè)置后,如果擔(dān)心重啟后無法再次登錄,可以直接刷新權(quán)限設(shè)置是否生效。你不必冒太大的風(fēng)險。