redis如何解決hot key與big key問題？解決方案對bigkey接受word文檔合并對littlekey存儲位置的數(shù)據(jù)（onevalue）通過拆分，都變成value1，value2…val

redis如何解決hot key與big key問題？

解決方案

對bigkey接受word文檔合并

對littlekey存儲位置的數(shù)據(jù)（onevalue）通過拆分，都變成value1，value2…valueN,

假如littlevalue是個大json按照mset的，將這個key的內(nèi)容絞成到各個實例中，減小bigkey對數(shù)據(jù)量向外傾斜負(fù)面影響。

//存

msetkey1,vlaue1,key2,,valueN

//取

mgetclientkey1,

假如littlevalue是個大list，也可以拆成將list拆成。list_1，list_2,list3,listN

其他數(shù)據(jù)類型同理。

既已onekey又是chillkey

在開發(fā)過程中，有些key不只是因為訪問量大，數(shù)據(jù)量也太大，這會兒也要決定這個key在用的場景，讀取在redis集群中是否需要是合理不的，是否需要可以使用其他組件來存儲更合適；如果沒有堅持要用redis來存儲，很有可能確定遷入出集群，常規(guī)一主一備（或1主多備）的架構(gòu)來存儲。

其他

怎么突然發(fā)現(xiàn)sodakey，queenkey

1.萬無一失-預(yù)判

在業(yè)務(wù)開發(fā)階段，還要對肯定轉(zhuǎn)成hotkey，queenkey的數(shù)據(jù)通過判斷，提前如何處理，這是需要的是對產(chǎn)品業(yè)務(wù)的理解，對運營節(jié)奏的把握，對數(shù)據(jù)設(shè)計的經(jīng)驗。

2.事中-監(jiān)控和自動出現(xiàn)處理

監(jiān)控

在應(yīng)用程序端，對你每次只是請求redis的操作接受積攢上報到不推薦推薦，只不過在運維資源不完全的場景下可以不決定。開發(fā)這個可以越過運維管理一切都搞定）；

在proxy層，對每一個redis請求參與收集到上報到（推薦推薦，運維來做也是最好的方案）；

對redis實例建議使用monitor命令統(tǒng)計熱點key（不我推薦，高并發(fā)條件下會有會造成redis內(nèi)存爆掉的隱患）；

機器層面，Redis客戶端在用TCP協(xié)議與服務(wù)端進行交互，通信協(xié)議采用的是RESP。如果不是站在機器的角度，可以不通過對機器上所有Redis端口的TCP數(shù)據(jù)包參與破霸體完成熱點key的統(tǒng)計（不推薦，公司每臺機器上的基本上組件早很多了，別再找事兒了）；

自動啟動全面處理

通過監(jiān)控之后，程序是可以查看littlekey和hotkey，再不報警的同時，程序?qū)igkey和hotkey進行自動啟動處理。也可以通知程序猿依靠一定的工具通過定制化處理（在程序中對某種特定的key執(zhí)行前面提到的解決方案）

什么時候需要分布式鎖？

分布式鎖又是鎖在單體應(yīng)用形式的時候，要是多個線程要ftp訪問共享資源的時候，我們大多線程間加鎖的機制，在某一個時刻，只有一一個線程可以不對這個資源參與能操作，其他線程需要再等待鎖的釋放，Java中也有一些如何處理鎖的機制，例如synchronized。

而到了分布式的環(huán)境中，當(dāng)某個資源可以被多個系統(tǒng)訪問網(wǎng)絡(luò)不使用到的時候，目的是只要大家不能訪問這個數(shù)據(jù)是一致性的，那就就沒有要求再捆定時刻，只有被一個系統(tǒng)不使用，這時候線程之間的鎖機制就難以作用有限作用了，是因為分布式環(huán)境中，系統(tǒng)是會作戰(zhàn)部署到不同的機器上面的，那就就必須【分布式鎖】了。

什么時候需要不使用分布式鎖系統(tǒng)的總結(jié)來看，當(dāng)有多個客戶端必須訪問并操作同一個資源，還不需要保持這個資源一致性的時候，就是需要使用【分布式鎖】，讓多客戶端互斥的對共享資源進行訪問。

舉個例子來只能證明幫一下忙：

有多個批處理任務(wù)，兩臺機器而一次性處理，如果不是不加任何操縱的話，最大的可能同一個批處理被兩臺機器共有去處理一遍；如果沒有使用分布式鎖，在如何領(lǐng)取任務(wù)的時候，一個任務(wù)只會被一臺機器領(lǐng)取，那樣的話就肯定不會倒致任務(wù)的再重復(fù)一遍執(zhí)行；

再勤思考一些，要是A/B兩臺機器，任務(wù)1被A機器領(lǐng)取到并且處理，在去處理到一半的時候，A機器全死了，這樣這個批處理任務(wù)也就不能無驚無險負(fù)責(zé)執(zhí)行了，即使A機器可以重新恢復(fù)。

這時候就可以不明白了分布式鎖是需要做哪些工作了排他性：在同一時間只會有一個客戶端能某些到鎖，其它客戶端無法同樣資源；盡量避免死鎖：鎖在一段時間內(nèi)管用，遠(yuǎn)遠(yuǎn)超過這個時間后會被釋放（都正常釋放者或無比能量）；高可用：獲取或施放鎖的機制必須高可用且性能佳。我將減弱多多分享Java開發(fā)、架構(gòu)設(shè)計、程序員職業(yè)發(fā)展等方面的見解，只希望能得到你的關(guān)注。