mongodb分頁查詢優(yōu)化 mongodb多表分頁怎么查詢?
mongodb多表分頁怎么查詢?傳統(tǒng)的sql分頁,所有的方案幾乎是繞不開row_number的,對于需要各種排序,復雜查詢的場景,row_number就是殺手锏。另外,針對現在的web很流行的poll
mongodb多表分頁怎么查詢?
傳統(tǒng)的sql分頁,所有的方案幾乎是繞不開row_number的,對于需要各種排序,復雜查詢的場景,row_number就是殺手锏。另外,針對現在的web很流行的poll/push加載分頁的方式,一般會利用時間戳來實現分頁。 這兩種分頁可以說前者是通用的,連Linq生成的分頁都是row_number,可想而知它多通用。后者是無論是性能和復雜程度都是最好的,因為只要簡單的一個時間戳即可。
mysql表數據量太大,達到了1億多條數據,除了分庫分表之外,還有沒有其他的解決方式?
mysql在常規(guī)配置下,一般只能承受2000萬的數據量(同時讀寫,且表中有大文本字段,單臺服務器)。現在超過1億,并不斷增加的情況下,建議如下處理:
1 分表。可以按時間,或按一定的規(guī)則拆分,做到查詢某一條數據庫,盡量在一個子表中即可。這是最有效的方法
2 讀寫分離。尤其是寫入,放在新表中,定期進行同步。如果其中記錄不斷有update,最好將寫的數據放在 redis中,定期同步
3 表的大文本字段分離出來,成為獨立的新表。大文本字段,可以使用NOSQL數據庫
4 優(yōu)化架構,或優(yōu)化SQL查詢,避免聯表查詢,盡量不要用count(*), in,遞歸等消耗性能的語句
5 用內存緩存,或在前端讀的時候,增加緩存數據庫。重復讀取時,直接從緩存中讀取。
上面是低成本的管理方法,基本幾臺服務器即可搞定,但是管理起來麻煩一些。
當然,如果整體數據量特別大的話,也不在乎投入費用的話,用集群吧,用TIDB吧