100萬數(shù)據(jù)放咋redis里 mysql中有100萬數(shù)據(jù),redis存20萬條熱搜的數(shù)據(jù),用什么方式?
mysql中有100萬數(shù)據(jù),redis存20萬條熱搜的數(shù)據(jù),用什么方式?例如,如果有100個產(chǎn)品,其中200000個是流行的,需要緩存以降低DB壓力,那么在實際項目中,流行的產(chǎn)品必須動態(tài)變化。然后您需
mysql中有100萬數(shù)據(jù),redis存20萬條熱搜的數(shù)據(jù),用什么方式?
例如,如果有100個產(chǎn)品,其中200000個是流行的,需要緩存以降低DB壓力,那么在實際項目中,流行的產(chǎn)品必須動態(tài)變化。然后您需要一個redis排序隊列來提取最熱門的產(chǎn)品。最熱門產(chǎn)品的分數(shù)可能需要根據(jù)點擊率和訂單率設(shè)計算法,5分鐘點擊、1小時點擊等計算一個分數(shù),然后另一個離線任務(wù)根據(jù)消息或定時觸發(fā)器取出隊列前面的200000 ID,并同步緩存。當(dāng)然,設(shè)計類似的微博也需要提供一個方法,手動將其設(shè)置為熱門
如果你有面試問這個問題,工資應(yīng)該是20萬年,其他選擇獎金應(yīng)該先支付。這個想法不是堆機器就是堆機器。
Redis服務(wù)支持5000萬的QPS,有什么好的思路?
redis的OPS只有100個確實有問題,這違背了redis高性能的定義??梢詮囊韵聨讉€方面進行檢查:
1。部署redis的服務(wù)器資源是否充足,包括CPU和內(nèi)存。redis的數(shù)據(jù)存儲在re內(nèi)存中,足夠的內(nèi)存是redis的必要條件。Redis是一個單線程架構(gòu),因此很容易運行單核CPU滿;
2。客戶端和redis服務(wù)器的網(wǎng)絡(luò)帶寬是否足夠,redis的高性能是指其自身的性能處理速度極快,但如果網(wǎng)絡(luò)延遲比較大,也會導(dǎo)致OPS降低;
3。無論是否有bigkey,大的key-value對都會占用比較大的內(nèi)存,在操作過程中會消耗更多的計算資源和網(wǎng)絡(luò)資源,可以使用redis cli——bigkeys命令發(fā)現(xiàn)如果有,需要根據(jù)業(yè)務(wù)情況拆分key-value;
4。無論是否使用了錯誤的值類型,redis一般包括string(string)、list(linked list)、set(set)、Zset(sorted)set(ordered set)和hash(hash type),需要結(jié)合實際業(yè)務(wù)選擇值類型;
5。算法復(fù)雜度高的命令,如hgetall、smembers、keys等,是否可以替換為hmget、sscan、scan等;
6。查詢redis的慢查詢?nèi)罩?,命令為slowlog Get,可以定位具體的慢操作并進行相應(yīng)的優(yōu)化;
7。如果redis中啟用了持久性功能,RDB和AOF可能會導(dǎo)致性能問題。您可以通過info persistence查看與persistence相關(guān)的統(tǒng)計數(shù)據(jù)是否有異常,如fork是否會太慢,AOF_uu2;delayed_uu2;fsync是否太大等
以上只是個人建議,如果有問題,請補充更正,謝謝!