100萬(wàn)數(shù)據(jù)放咋redis里 mysql中有100萬(wàn)數(shù)據(jù),redis存20萬(wàn)條熱搜的數(shù)據(jù),用什么方式?
mysql中有100萬(wàn)數(shù)據(jù),redis存20萬(wàn)條熱搜的數(shù)據(jù),用什么方式?例如,如果有100個(gè)產(chǎn)品,其中200000個(gè)是流行的,需要緩存以降低DB壓力,那么在實(shí)際項(xiàng)目中,流行的產(chǎn)品必須動(dòng)態(tài)變化。然后您需
mysql中有100萬(wàn)數(shù)據(jù),redis存20萬(wàn)條熱搜的數(shù)據(jù),用什么方式?
例如,如果有100個(gè)產(chǎn)品,其中200000個(gè)是流行的,需要緩存以降低DB壓力,那么在實(shí)際項(xiàng)目中,流行的產(chǎn)品必須動(dòng)態(tài)變化。然后您需要一個(gè)redis排序隊(duì)列來(lái)提取最熱門的產(chǎn)品。最熱門產(chǎn)品的分?jǐn)?shù)可能需要根據(jù)點(diǎn)擊率和訂單率設(shè)計(jì)算法,5分鐘點(diǎn)擊、1小時(shí)點(diǎn)擊等計(jì)算一個(gè)分?jǐn)?shù),然后另一個(gè)離線任務(wù)根據(jù)消息或定時(shí)觸發(fā)器取出隊(duì)列前面的200000 ID,并同步緩存。當(dāng)然,設(shè)計(jì)類似的微博也需要提供一個(gè)方法,手動(dòng)將其設(shè)置為熱門
如果你有面試問(wèn)這個(gè)問(wèn)題,工資應(yīng)該是20萬(wàn)年,其他選擇獎(jiǎng)金應(yīng)該先支付。這個(gè)想法不是堆機(jī)器就是堆機(jī)器。
Redis服務(wù)支持5000萬(wàn)的QPS,有什么好的思路?
redis的OPS只有100個(gè)確實(shí)有問(wèn)題,這違背了redis高性能的定義??梢詮囊韵聨讉€(gè)方面進(jìn)行檢查:
1。部署redis的服務(wù)器資源是否充足,包括CPU和內(nèi)存。redis的數(shù)據(jù)存儲(chǔ)在re內(nèi)存中,足夠的內(nèi)存是redis的必要條件。Redis是一個(gè)單線程架構(gòu),因此很容易運(yùn)行單核CPU滿;
2??蛻舳撕蛂edis服務(wù)器的網(wǎng)絡(luò)帶寬是否足夠,redis的高性能是指其自身的性能處理速度極快,但如果網(wǎng)絡(luò)延遲比較大,也會(huì)導(dǎo)致OPS降低;
3。無(wú)論是否有bigkey,大的key-value對(duì)都會(huì)占用比較大的內(nèi)存,在操作過(guò)程中會(huì)消耗更多的計(jì)算資源和網(wǎng)絡(luò)資源,可以使用redis cli——bigkeys命令發(fā)現(xiàn)如果有,需要根據(jù)業(yè)務(wù)情況拆分key-value;
4。無(wú)論是否使用了錯(cuò)誤的值類型,redis一般包括string(string)、list(linked list)、set(set)、Zset(sorted)set(ordered set)和hash(hash type),需要結(jié)合實(shí)際業(yè)務(wù)選擇值類型;
5。算法復(fù)雜度高的命令,如hgetall、smembers、keys等,是否可以替換為hmget、sscan、scan等;
6。查詢r(jià)edis的慢查詢?nèi)罩?,命令為slowlog Get,可以定位具體的慢操作并進(jìn)行相應(yīng)的優(yōu)化;
7。如果redis中啟用了持久性功能,RDB和AOF可能會(huì)導(dǎo)致性能問(wèn)題。您可以通過(guò)info persistence查看與persistence相關(guān)的統(tǒng)計(jì)數(shù)據(jù)是否有異常,如fork是否會(huì)太慢,AOF_uu2;delayed_uu2;fsync是否太大等
以上只是個(gè)人建議,如果有問(wèn)題,請(qǐng)補(bǔ)充更正,謝謝!