日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 單片機(jī) > 架構(gòu)師社區(qū)
[導(dǎo)讀]?可能是最完善的?Redis分布式鎖原理與實(shí)戰(zhàn)總結(jié),建議收藏Redis分布式鎖使用SET指令就可以實(shí)現(xiàn)了么?在分布式領(lǐng)域CAP理論一直存在。分布式鎖的門道可沒那么簡(jiǎn)單,我們?cè)诰W(wǎng)上看到的分布式鎖方案可能是有問題的?!复a哥」一步步帶你深入分布式鎖是如何一步步完善,在高并發(fā)生產(chǎn)環(huán)境中如...


?可能是最完善的?Redis 分布式鎖原理與實(shí)戰(zhàn)總結(jié),建議收藏

Redis 分布式鎖使用 SET 指令就可以實(shí)現(xiàn)了么?在分布式領(lǐng)域 CAP 理論一直存在。

分布式鎖的門道可沒那么簡(jiǎn)單,我們?cè)诰W(wǎng)上看到的分布式鎖方案可能是有問題的。

「碼哥」一步步帶你深入分布式鎖是如何一步步完善,在高并發(fā)生產(chǎn)環(huán)境中如何正確使用分布式鎖。

在進(jìn)入正文之前,我們先帶著問題去思考:

  • 什么時(shí)候需要分布式鎖?
  • 加、解鎖的代碼位置有講究么?
  • 如何避免出現(xiàn)鎖再也無法刪除?
  • 超時(shí)時(shí)間設(shè)置多少合適呢?
  • 如何避免鎖被其他線程釋放
  • 如何實(shí)現(xiàn)重入鎖?
  • 主從架構(gòu)會(huì)帶來什么安全問題?
  • 什么是 Redlock
  • Redisson 分布式鎖最佳實(shí)戰(zhàn)
  • 看門狗實(shí)現(xiàn)原理
  • ……

什么時(shí)候用分布式鎖?
?碼哥,說個(gè)通俗的例子講解下什么時(shí)候需要分布式鎖呢?

診所只有一個(gè)醫(yī)生,很多患者前來就診。

醫(yī)生在同一時(shí)刻只能給一個(gè)患者提供就診服務(wù)。

如果不是這樣的話,就會(huì)出現(xiàn)醫(yī)生在就診腎虧的「肖菜雞」準(zhǔn)備開藥時(shí)候患者切換成了腳臭的「謝霸哥」,這時(shí)候藥就被謝霸哥取走了。

治腎虧的藥被有腳臭的拿去了。

當(dāng)并發(fā)去讀寫一個(gè)【共享資源】的時(shí)候,我們?yōu)榱吮WC數(shù)據(jù)的正確,需要控制同一時(shí)刻只有一個(gè)線程訪問。

分布式鎖就是用來控制同一時(shí)刻,只有一個(gè) JVM 進(jìn)程中的一個(gè)線程可以訪問被保護(hù)的資源。

分布式鎖入門

?65 哥:分布式鎖應(yīng)該滿足哪些特性?

  1. 互斥:在任何給定時(shí)刻,只有一個(gè)客戶端可以持有鎖;
  2. 無死鎖:任何時(shí)刻都有可能獲得鎖,即使獲取鎖的客戶端崩潰;
  3. 容錯(cuò):只要大多數(shù) Redis的節(jié)點(diǎn)都已經(jīng)啟動(dòng),客戶端就可以獲取和釋放鎖。
?碼哥,我可以使用 SETNX key value 命令是實(shí)現(xiàn)「互斥」特性。

這個(gè)命令來自于SET if Not eXists的縮寫,意思是:如果 key 不存在,則設(shè)置 value 給這個(gè)key,否則啥都不做。Redis 官方地址說的:

命令的返回值:

  • 1:設(shè)置成功;
  • 0:key 沒有設(shè)置成功。
如下場(chǎng)景:

敲代碼一天累了,想去放松按摩下肩頸。

168 號(hào)技師最搶手,大家喜歡點(diǎn),所以并發(fā)量大,需要分布式鎖控制。

同一時(shí)刻只允許一個(gè)「客戶」預(yù)約 168 技師。

肖菜雞申請(qǐng) 168 技師成功:

>?SETNX?lock:168?1
(integer)?1?#?獲取 168 技師成功
謝霸哥后面到,申請(qǐng)失敗:

>?SETNX?lock?2
(integer)?0?#?客戶謝霸哥?2?獲取失敗
此刻,申請(qǐng)成功的客戶就可以享受 168 技師的肩頸放松服務(wù)「共享資源」。

享受結(jié)束后,要及時(shí)釋放鎖,給后來者享受 168 技師的服務(wù)機(jī)會(huì)。

?肖菜雞,碼哥考考你如何釋放鎖呢?

很簡(jiǎn)單,使用 DEL 刪除這個(gè) key 就行。

>?DEL?lock:168
(integer)?1
?碼哥,你見過「龍」么?我見過,因?yàn)槲冶灰粭l龍服務(wù)過。

肖菜雞,事情可沒這么簡(jiǎn)單。

這個(gè)方案存在一個(gè)存在造成鎖無法釋放的問題,造成該問題的場(chǎng)景如下:

  1. 客戶端所在節(jié)點(diǎn)崩潰,無法正確釋放鎖;

  2. 業(yè)務(wù)邏輯異常,無法執(zhí)行 DEL指令。

這樣,這個(gè)鎖就會(huì)一直占用,鎖在我手里,我掛了,這樣其他客戶端再也拿不到這個(gè)鎖了。

超時(shí)設(shè)置

?碼哥,我可以在獲取鎖成功的時(shí)候設(shè)置一個(gè)「超時(shí)時(shí)間」

比如設(shè)定按摩服務(wù)一次 60 分鐘,那么在給這個(gè) key 加鎖的時(shí)候設(shè)置 60 分鐘過期即可:

>?SETNX?lock:168?1??//?獲取鎖
(integer)?1
>?EXPIRE?lock:168?60??//?60s?自動(dòng)刪除
(integer)?1
這樣,到點(diǎn)后鎖自動(dòng)釋放,其他客戶就可以繼續(xù)享受 168 技師按摩服務(wù)了。

?誰要這么寫,就糟透了。

「加鎖」、「設(shè)置超時(shí)」是兩個(gè)命令,他們不是原子操作。

如果出現(xiàn)只執(zhí)行了第一條,第二條沒機(jī)會(huì)執(zhí)行就會(huì)出現(xiàn)「超時(shí)時(shí)間」設(shè)置失敗,依然出現(xiàn)鎖無法釋放。

?碼哥,那咋辦,我想被一條龍服務(wù),要解決這個(gè)問題

Redis 2.6.X 之后,官方拓展了 SET 命令的參數(shù),滿足了當(dāng) key 不存在則設(shè)置 value,同時(shí)設(shè)置超時(shí)時(shí)間的語義,并且滿足原子性。

SET?resource_name?random_value?NX?PX?30000
  • NX:表示只有 resource_name 不存在的時(shí)候才能 SET 成功,從而保證只有一個(gè)客戶端可以獲得鎖;
  • PX 30000:表示這個(gè)鎖有一個(gè) 30 秒自動(dòng)過期時(shí)間。
這樣寫還不夠,我們還要防止不能釋放不是自己加的鎖。我們可以在 value 上做文章。

繼續(xù)往下看……

釋放了不是自己加的鎖

?這樣我能穩(wěn)妥的享受一條龍服務(wù)了么?

No,還有一種場(chǎng)景會(huì)導(dǎo)致釋放別人的鎖:

  1. 客戶 1 獲取鎖成功并設(shè)置設(shè)置 30 秒超時(shí);
  2. 客戶 1 因?yàn)橐恍┰驅(qū)е聢?zhí)行很慢(網(wǎng)絡(luò)問題、發(fā)生 FullGC……),過了 30 秒依然沒執(zhí)行完,但是鎖過期「自動(dòng)釋放了」;
  3. 客戶 2 申請(qǐng)加鎖成功;
  4. 客戶 1 執(zhí)行完成,執(zhí)行 DEL 釋放鎖指令,這個(gè)時(shí)候就把客戶 2 的鎖給釋放了。
有個(gè)關(guān)鍵問題需要解決:自己的鎖只能自己來釋放。

?我要如何刪除是自己加的鎖呢?

在執(zhí)行 DEL 指令的時(shí)候,我們要想辦法檢查下這個(gè)鎖是不是自己加的鎖再執(zhí)行刪除指令。

解鈴還須系鈴人

?碼哥,我在加鎖的時(shí)候設(shè)置一個(gè)「唯一標(biāo)識(shí)」作為 value 代表加鎖的客戶端。SET resource_name random_value NX PX 30000

在釋放鎖的時(shí)候,客戶端將自己的「唯一標(biāo)識(shí)」與鎖上的「標(biāo)識(shí)」比較是否相等,匹配上則刪除,否則沒有權(quán)利釋放鎖。

偽代碼如下:

//?比對(duì)?value?與?唯一標(biāo)識(shí)
if?(redis.get("lock:168").equals(random_value)){
???redis.del("lock:168");?//比對(duì)成功則刪除
?}
?有沒有想過,這是 GET DEL 指令組合而成的,這里又會(huì)涉及到原子性問題。

我們可以通過 Lua 腳本來實(shí)現(xiàn),這樣判斷和刪除的過程就是原子操作了。

//?獲取鎖的?value?與?ARGV[1]?是否匹配,匹配則執(zhí)行?del
if?redis.call("get",KEYS[1])?==?ARGV[1]?then
????return?redis.call("del",KEYS[1])
else
????return?0
end
這樣通過唯一值設(shè)置成 value 標(biāo)識(shí)加鎖的客戶端很重要,僅使用 DEL 是不安全的,因?yàn)橐粋€(gè)客戶端可能會(huì)刪除另一個(gè)客戶端的鎖。

使用上面的腳本,每個(gè)鎖都用一個(gè)隨機(jī)字符串“簽名”,只有當(dāng)刪除鎖的客戶端的“簽名”與鎖的 value 匹配的時(shí)候,才會(huì)刪除它。

官方文檔也是這么說的:https://redis.io/topics/distlock

這個(gè)方案已經(jīng)相對(duì)完美,我們用的最多的可能就是這個(gè)方案了。

正確設(shè)置鎖超時(shí)

?鎖的超時(shí)時(shí)間怎么計(jì)算合適呢?

這個(gè)時(shí)間不能瞎寫,一般要根據(jù)在測(cè)試環(huán)境多次測(cè)試,然后壓測(cè)多輪之后,比如計(jì)算出平均執(zhí)行時(shí)間 200 ms。

那么鎖的超時(shí)時(shí)間就放大為平均執(zhí)行時(shí)間的 3~5 倍。

?為啥要放放大呢?

因?yàn)槿绻i的操作邏輯中有網(wǎng)絡(luò) IO 操作、JVM FullGC 等,線上的網(wǎng)絡(luò)不會(huì)總一帆風(fēng)順,我們要給網(wǎng)絡(luò)抖動(dòng)留有緩沖時(shí)間。

?那我設(shè)置更大一點(diǎn),比如設(shè)置 1 小時(shí)不是更安全?

不要鉆牛角,多大算大?

設(shè)置時(shí)間過長,一旦發(fā)生宕機(jī)重啟,就意味著 1 小時(shí)內(nèi),分布式鎖的服務(wù)全部節(jié)點(diǎn)不可用。

你要讓運(yùn)維手動(dòng)刪除這個(gè)鎖么?

只要運(yùn)維真的不會(huì)打你。

?有沒有完美的方案呢?不管時(shí)間怎么設(shè)置都不大合適。

我們可以讓獲得鎖的線程開啟一個(gè)守護(hù)線程,用來給快要過期的鎖「續(xù)航」。

加鎖的時(shí)候設(shè)置一個(gè)過期時(shí)間,同時(shí)客戶端開啟一個(gè)「守護(hù)線程」,定時(shí)去檢測(cè)這個(gè)鎖的失效時(shí)間。

如果快要過期,但是業(yè)務(wù)邏輯還沒執(zhí)行完成,自動(dòng)對(duì)這個(gè)鎖進(jìn)行續(xù)期,重新設(shè)置過期時(shí)間。

?這個(gè)道理行得通,可我寫不出。

別慌,已經(jīng)有一個(gè)庫把這些工作都封裝好了他叫 Redisson。

在使用分布式鎖時(shí),它就采用了「自動(dòng)續(xù)期」的方案來避免鎖過期,這個(gè)守護(hù)線程我們一般也把它叫做「看門狗」線程。

?一路優(yōu)化下來,方案似乎比較「嚴(yán)謹(jǐn)」了,抽象出對(duì)應(yīng)的模型如下。

  1. 通過 SET lock_resource_name random_value NX PX expire_time,同時(shí)啟動(dòng)守護(hù)線程為快要過期但還沒執(zhí)行完的客戶端的鎖續(xù)命;
  2. 客戶端執(zhí)行業(yè)務(wù)邏輯操作共享資源;
  3. 通過 Lua 腳本釋放鎖,先 get 判斷鎖是否是自己加的,再執(zhí)行 DEL。
這個(gè)方案實(shí)際上已經(jīng)比較完美,能寫到這一步已經(jīng)打敗 90% 的程序猿了。

但是對(duì)于追求極致的程序員來說還遠(yuǎn)遠(yuǎn)不夠:

  1. 可重入鎖如何實(shí)現(xiàn)?
  2. 主從架構(gòu)崩潰恢復(fù)導(dǎo)致鎖丟失如何解決?
  3. 客戶端加鎖的位置有門道么?

加解鎖代碼位置有講究

根據(jù)前面的分析,我們已經(jīng)有了一個(gè)「相對(duì)嚴(yán)謹(jǐn)」的分布式鎖了。

于是「謝霸哥」就寫了如下代碼將分布式鎖運(yùn)用到項(xiàng)目中,以下是偽代碼邏輯:

public?void?doSomething()?{
??redisLock.lock();?//?上鎖
????try?{
????????//?處理業(yè)務(wù)
????????.....
????????redisLock.unlock();?//?釋放鎖
????}?catch?(Exception?e)?{
????????e.printStackTrace();
????}
}
?有沒有想過:一旦執(zhí)行業(yè)務(wù)邏輯過程中拋出異常,程序就無法執(zhí)行釋放鎖的流程。

所以釋放鎖的代碼一定要放在 finally{} 塊中。

加鎖的位置也有問題,放在 try 外面的話,如果執(zhí)行 redisLock.lock() 加鎖異常,但是實(shí)際指令已經(jīng)發(fā)送到服務(wù)端并執(zhí)行,只是客戶端讀取響應(yīng)超時(shí),就會(huì)導(dǎo)致沒有機(jī)會(huì)執(zhí)行解鎖的代碼。

所以 redisLock.lock() 應(yīng)該寫在 try 代碼塊,這樣保證一定會(huì)執(zhí)行解鎖邏輯。

綜上所述,正確代碼位置如下 :

public?void?doSomething()?{
????try?{
????????//?上鎖
????????redisLock.lock();
????????//?處理業(yè)務(wù)
????????...
????}?catch?(Exception?e)?{
????????e.printStackTrace();
????}?finally?{
??????//?釋放鎖
??????redisLock.unlock();
????}
}

實(shí)現(xiàn)可重入鎖

?65 哥:可重入鎖要如何實(shí)現(xiàn)呢?

當(dāng)一個(gè)線程執(zhí)行一段代碼成功獲取鎖之后,繼續(xù)執(zhí)行時(shí),又遇到加鎖的代碼,可重入性就就保證線程能繼續(xù)執(zhí)行,而不可重入就是需要等待鎖釋放之后,再次獲取鎖成功,才能繼續(xù)往下執(zhí)行。

用一段代碼解釋可重入:

public?synchronized?void?a()?{
????b();
}
public?synchronized?void?b()?{
????//?pass
}
假設(shè) X 線程在 a 方法獲取鎖之后,繼續(xù)執(zhí)行 b 方法,如果此時(shí)不可重入,線程就必須等待鎖釋放,再次爭(zhēng)搶鎖。

鎖明明是被 X 線程擁有,卻還需要等待自己釋放鎖,然后再去搶鎖,這看起來就很奇怪,我釋放我自己~

Redis Hash 可重入鎖

?Redisson 類庫就是通過 Redis Hash 來實(shí)現(xiàn)可重入鎖

當(dāng)線程擁有鎖之后,往后再遇到加鎖方法,直接將加鎖次數(shù)加 1,然后再執(zhí)行方法邏輯。

退出加鎖方法之后,加鎖次數(shù)再減 1,當(dāng)加鎖次數(shù)為 0 時(shí),鎖才被真正的釋放。

可以看到可重入鎖最大特性就是計(jì)數(shù),計(jì)算加鎖的次數(shù)。

所以當(dāng)可重入鎖需要在分布式環(huán)境實(shí)現(xiàn)時(shí),我們也就需要統(tǒng)計(jì)加鎖次數(shù)。

加鎖邏輯

?我們可以使用 Redis hash 結(jié)構(gòu)實(shí)現(xiàn),key 表示被鎖的共享資源, hash 結(jié)構(gòu)的 fieldKey 的 value 則保存加鎖的次數(shù)。

通過 Lua 腳本實(shí)現(xiàn)原子性,假設(shè) KEYS1 = 「lock」, ARGV「1000,uuid」:

----?1?代表?true
----?0?代表?false
if?(redis.call('exists',?KEYS[1])?==?0)?then
????redis.call('hincrby',?KEYS[1],?ARGV[2],?1);
????redis.call('pexpire',?KEYS[1],?ARGV[1]);
????return?1;
end?;
if?(redis.call('hexists',?KEYS[1],?ARGV[2])?==?1)?then
????redis.call('hincrby',?KEYS[1],?ARGV[2],?1);
????redis.call('pexpire',?KEYS[1],?ARGV[1]);
????return?1;
end?;
return?0;
加鎖代碼首先使用 Redis exists 命令判斷當(dāng)前 lock 這個(gè)鎖是否存在。

如果鎖不存在的話,直接使用 hincrby創(chuàng)建一個(gè)鍵為 lock hash 表,并且為 Hash 表中鍵為 uuid 初始化為 0,然后再次加 1,最后再設(shè)置過期時(shí)間。

如果當(dāng)前鎖存在,則使用 hexists判斷當(dāng)前 lock 對(duì)應(yīng)的 hash 表中是否存在 uuid 這個(gè)鍵,如果存在,再次使用 hincrby 加 1,最后再次設(shè)置過期時(shí)間。

最后如果上述兩個(gè)邏輯都不符合,直接返回。

解鎖邏輯

--?判斷?hash?set?可重入?key?的值是否等于?0
--?如果為?0?代表?該可重入?key?不存在
if?(redis.call('hexists',?KEYS[1],?ARGV[1])?==?0)?then
????return?nil;
end?;
--?計(jì)算當(dāng)前可重入次數(shù)
local?counter?=?redis.call('hincrby',?KEYS[1],?ARGV[1],?-1);
--?小于等于?0?代表可以解鎖
if?(counter?>?0)?then
????return?0;
else
????redis.call('del',?KEYS[1]);
????return?1;
end?;
return?nil;
首先使用 hexists 判斷 Redis Hash 表是否存給定的域。

如果 lock 對(duì)應(yīng) Hash 表不存在,或者 Hash 表不存在 uuid 這個(gè) key,直接返回 nil。

若存在的情況下,代表當(dāng)前鎖被其持有,首先使用 hincrby使可重入次數(shù)減 1 ,然后判斷計(jì)算之后可重入次數(shù),若小于等于 0,則使用 del 刪除這把鎖。

解鎖代碼執(zhí)行方式與加鎖類似,只不過解鎖的執(zhí)行結(jié)果返回類型使用 Long。這里之所以沒有跟加鎖一樣使用 Boolean ,這是因?yàn)榻怄i lua 腳本中,三個(gè)返回值含義如下:

  • 1 代表解鎖成功,鎖被釋放
  • 0 代表可重入次數(shù)被減 1
  • null 代表其他線程嘗試解鎖,解鎖失敗.

主從架構(gòu)帶來的問題

?碼哥,到這里分布式鎖「很完美了」吧,沒想到分布式鎖這么多門道。

路還很遠(yuǎn),之前分析的場(chǎng)景都是,鎖在「單個(gè)」Redis 實(shí)例中可能產(chǎn)生的問題,并沒有涉及到 Redis 主從模式導(dǎo)致的問題。

我們通常使用「Cluster 集群」或者「哨兵集群」的模式部署保證高可用。

這兩個(gè)模式都是基于「主從架構(gòu)數(shù)據(jù)同步復(fù)制」實(shí)現(xiàn)的數(shù)據(jù)同步,而 Redis 的主從復(fù)制默認(rèn)是異步的。

?以下內(nèi)容來自于官方文檔 https://redis.io/topics/distlock

我們?cè)囅胂氯缦聢?chǎng)景會(huì)發(fā)生什么問題:

  1. 客戶端 A 在 master 節(jié)點(diǎn)獲取鎖成功。
  2. 還沒有把獲取鎖的信息同步到 slave 的時(shí)候,master 宕機(jī)。
  3. slave 被選舉為新 master,這時(shí)候沒有客戶端 A 獲取鎖的數(shù)據(jù)。
  4. 客戶端 B 就能成功的獲得客戶端 A 持有的鎖,違背了分布式鎖定義的互斥。
雖然這個(gè)概率極低,但是我們必須得承認(rèn)這個(gè)風(fēng)險(xiǎn)的存在。

?Redis 的作者提出了一種解決方案,叫 Redlock(紅鎖)

Redis 的作者為了統(tǒng)一分布式鎖的標(biāo)準(zhǔn),搞了一個(gè) Redlock,算是 Redis 官方對(duì)于實(shí)現(xiàn)分布式鎖的指導(dǎo)規(guī)范,https://redis.io/topics/distlock,但是這個(gè) Redlock 也被國外的一些分布式專家給噴了。

因?yàn)樗膊煌昝?,有“漏洞”?/p>

什么是 Redlock

紅鎖是不是這個(gè)?

泡面吃多了你,Redlock 紅鎖是為了解決主從架構(gòu)中當(dāng)出現(xiàn)主從切換導(dǎo)致多個(gè)客戶端持有同一個(gè)鎖而提出的一種算法。

大家可以看官方文檔(https://redis.io/topics/distlock),以下來自官方文檔的翻譯。

想用使用 Redlock,官方建議在不同機(jī)器上部署 5 個(gè) Redis 主節(jié)點(diǎn),節(jié)點(diǎn)都是完全獨(dú)立,也不使用主從復(fù)制,使用多個(gè)節(jié)點(diǎn)是為容錯(cuò)。

一個(gè)客戶端要獲取鎖有 5 個(gè)步驟:

  1. 客戶端獲取當(dāng)前時(shí)間 T1(毫秒級(jí)別);
  2. 使用相同的 keyvalue順序嘗試從 N個(gè) Redis實(shí)例上獲取鎖。
    • 每個(gè)請(qǐng)求都設(shè)置一個(gè)超時(shí)時(shí)間(毫秒級(jí)別),該超時(shí)時(shí)間要遠(yuǎn)小于鎖的有效時(shí)間,這樣便于快速嘗試與下一個(gè)實(shí)例發(fā)送請(qǐng)求。
    • 比如鎖的自動(dòng)釋放時(shí)間 10s,則請(qǐng)求的超時(shí)時(shí)間可以設(shè)置 5~50 毫秒內(nèi),這樣可以防止客戶端長時(shí)間阻塞。
  3. 客戶端獲取當(dāng)前時(shí)間 T2 并減去步驟 1 的 T1 來計(jì)算出獲取鎖所用的時(shí)間(T3 = T2 -T1)。當(dāng)且僅當(dāng)客戶端在大多數(shù)實(shí)例(N/2 1)獲取成功,且獲取鎖所用的總時(shí)間 T3 小于鎖的有效時(shí)間,才認(rèn)為加鎖成功,否則加鎖失敗。
  4. 如果第 3 步加鎖成功,則執(zhí)行業(yè)務(wù)邏輯操作共享資源,key 的真正有效時(shí)間等于有效時(shí)間減去獲取鎖所使用的時(shí)間(步驟 3 計(jì)算的結(jié)果)。
  5. 如果因?yàn)槟承┰?,獲取鎖失?。]有在至少 N/2 1 個(gè) Redis 實(shí)例取到鎖或者取鎖時(shí)間已經(jīng)超過了有效時(shí)間),客戶端應(yīng)該在所有的 Redis 實(shí)例上進(jìn)行解鎖(即便某些 Redis 實(shí)例根本就沒有加鎖成功)。
另外部署實(shí)例的數(shù)量要求是奇數(shù),為了能很好的滿足過半原則,如果是 6 臺(tái)則需要 4 臺(tái)獲取鎖成功才能認(rèn)為成功,所以奇數(shù)更合理

?事情可沒這么簡(jiǎn)單,Redis 作者把這個(gè)方案提出后,受到了業(yè)界著名的分布式系統(tǒng)專家的質(zhì)疑。

兩人好比神仙打架,兩人一來一回論據(jù)充足的對(duì)一個(gè)問題提出很多論斷……

  • Martin Kleppmann 提出質(zhì)疑的博客:https://martin.kleppmann.com/2016/02/08/how-to-do-distributed-locking.html
  • Redlock 設(shè)計(jì)者的回復(fù):http://antirez.com/news/101

Redlock 是與非

Martin Kleppmann 認(rèn)為鎖定的目的是為了保護(hù)對(duì)共享資源的讀寫,而分布式鎖應(yīng)該「高效」和「正確」。

  • 高效性:分布式鎖應(yīng)該要滿足高效的性能,Redlock 算法向 5 個(gè)節(jié)點(diǎn)執(zhí)行獲取鎖的邏輯性能不高,成本增加,復(fù)雜度也高;
  • 正確性:分布式鎖應(yīng)該防止并發(fā)進(jìn)程在同一時(shí)刻只能有一個(gè)線程能對(duì)共享數(shù)據(jù)讀寫。
出于這兩點(diǎn),我們沒必要承擔(dān) Redlock 的成本和復(fù)雜,運(yùn)行 5 個(gè) Redis 實(shí)例并判斷加鎖是否滿足大多數(shù)才算成功。

主從架構(gòu)崩潰恢復(fù)極小可能發(fā)生,這沒什么大不了的。使用單機(jī)版就夠了,Redlock 太重了,沒必要。

Martin 認(rèn)為 Redlock 根本達(dá)不到安全性的要求,也依舊存在鎖失效的問題!

Martin 的結(jié)論

  1. Redlock 不倫不類:對(duì)于偏好效率來講,Redlock 比較重,沒必要這么做,而對(duì)于偏好正確性來說,Redlock 是不夠安全的。
  2. 時(shí)鐘假設(shè)不合理:該算法對(duì)系統(tǒng)時(shí)鐘做出了危險(xiǎn)的假設(shè)(假設(shè)多個(gè)節(jié)點(diǎn)機(jī)器時(shí)鐘都是一致的),如果不滿足這些假設(shè),鎖就會(huì)失效。
  3. 無法保證正確性:Redlock 不能提供類似 fencing token 的方案,所以解決不了正確性的問題。為了正確性,請(qǐng)使用有「共識(shí)系統(tǒng)」的軟件,例如 Zookeeper。

Redis 作者 Antirez 的反駁

在 Redis 作者的反駁文章中,有 3 個(gè)重點(diǎn):

  • 時(shí)鐘問題:Redlock 并不需要完全一致的時(shí)鐘,只需要大體一致就可以了,允許有「誤差」,只要誤差不要超過鎖的租期即可,這種對(duì)于時(shí)鐘的精度要求并不是很高,而且這也符合現(xiàn)實(shí)環(huán)境。
  • 網(wǎng)絡(luò)延遲、進(jìn)程暫停問題:
    • 客戶端在拿到鎖之前,無論經(jīng)歷什么耗時(shí)長問題,Redlock 都能夠在第 3 步檢測(cè)出來
    • 客戶端在拿到鎖之后,發(fā)生 NPC,那 Redlock、Zookeeper 都無能為力
  • 質(zhì)疑 fencing token 機(jī)制。
關(guān)于 Redlock 的爭(zhēng)論我們下期再見,現(xiàn)在進(jìn)入 Redisson 實(shí)現(xiàn)分布式鎖實(shí)戰(zhàn)部分。

Redisson 分布式鎖

基于 SpringBoot starter 方式,添加 starter。

<dependency>
??<groupId>org.redissongroupId>
??<artifactId>redisson-spring-boot-starterartifactId>
??<version>3.16.4version>
dependency>

不過這里需要注意 springboot 與 redisson 的版本,因?yàn)楣俜酵扑] redisson 版本與 springboot 版本配合使用。

將 Redisson 與 Spring Boot 庫集成,還取決于 Spring Data Redis 模塊。

「碼哥」使用 SpringBoot 2.5.x 版本, 所以需要添加 redisson-spring-data-25。

<dependency>
??<groupId>org.redissongroupId>
??
??<artifactId>redisson-spring-data-25artifactId>
??<version>3.16.4version>
dependency>
添加配置文件

spring:
??redis:
????database:
????host:
????port:
????password:
????ssl:
????timeout:
????#?根據(jù)實(shí)際情況配置?cluster?或者哨兵
????cluster:
??????nodes:
????sentinel:
??????master:
??????nodes:
就這樣在 Spring 容器中我們擁有以下幾個(gè) Bean 可以使用:

  • RedissonClient
  • RedissonRxClient
  • RedissonReactiveClient
  • RedisTemplate
  • ReactiveRedisTemplate

失敗無限重試

RLock?lock?=?redisson.getLock("碼哥字節(jié)");
try?{

??//?1.最常用的第一種寫法
??lock.lock();

??//?執(zhí)行業(yè)務(wù)邏輯
??.....

}?finally?{
??lock.unlock();
}

拿鎖失敗時(shí)會(huì)不停的重試,具有 Watch Dog 自動(dòng)延期機(jī)制,默認(rèn)續(xù) 30s 每隔 30/3=10 秒續(xù)到 30s。

失敗超時(shí)重試,自動(dòng)續(xù)命

//?嘗試拿鎖10s后停止重試,獲取失敗返回false,具有Watch?Dog?自動(dòng)延期機(jī)制,?默認(rèn)續(xù)30s
boolean?flag?=?lock.tryLock(10,?TimeUnit.SECONDS);

超時(shí)自動(dòng)釋放鎖

//?沒有Watch Dog ,10s后自動(dòng)釋放,不需要調(diào)用 unlock 釋放鎖。
lock.lock(10,?TimeUnit.SECONDS);

超時(shí)重試,自動(dòng)解鎖

//?嘗試加鎖,最多等待100秒,上鎖以后10秒自動(dòng)解鎖,沒有?Watch?dog
boolean?res?=?lock.tryLock(100,?10,?TimeUnit.SECONDS);
if?(res)?{
???try?{
?????...
???}?finally?{
???????lock.unlock();
???}
}

Watch Dog 自動(dòng)延時(shí)

如果獲取分布式鎖的節(jié)點(diǎn)宕機(jī),且這個(gè)鎖還處于鎖定狀態(tài),就會(huì)出現(xiàn)死鎖。

為了避免這個(gè)情況,我們都會(huì)給鎖設(shè)置一個(gè)超時(shí)自動(dòng)釋放時(shí)間。

然而,還是會(huì)存在一個(gè)問題。

假設(shè)線程獲取鎖成功,并設(shè)置了 30 s 超時(shí),但是在 30s 內(nèi)任務(wù)還沒執(zhí)行完,鎖超時(shí)釋放了,就會(huì)導(dǎo)致其他線程獲取不該獲取的鎖。

所以,Redisson 提供了 watch dog 自動(dòng)延時(shí)機(jī)制,提供了一個(gè)監(jiān)控鎖的看門狗,它的作用是在 Redisson 實(shí)例被關(guān)閉前,不斷的延長鎖的有效期。

也就是說,如果一個(gè)拿到鎖的線程一直沒有完成邏輯,那么看門狗會(huì)幫助線程不斷的延長鎖超時(shí)時(shí)間,鎖不會(huì)因?yàn)槌瑫r(shí)而被釋放。

默認(rèn)情況下,看門狗的續(xù)期時(shí)間是 30s,也可以通過修改 Config.lockWatchdogTimeout 來另行指定。

另外 Redisson 還提供了可以指定 leaseTime 參數(shù)的加鎖方法來指定加鎖的時(shí)間。

超過這個(gè)時(shí)間后鎖便自動(dòng)解開了,不會(huì)延長鎖的有效期。

原理如下圖:

有兩個(gè)點(diǎn)需要注意:

  • watchDog 只有在未顯示指定加鎖超時(shí)時(shí)間(leaseTime)時(shí)才會(huì)生效。
  • lockWatchdogTimeout 設(shè)定的時(shí)間不要太小 ,比如設(shè)置的是 100 毫秒,由于網(wǎng)絡(luò)直接導(dǎo)致加鎖完后,watchdog 去延期時(shí),這個(gè) key 在 redis 中已經(jīng)被刪除了。

源碼導(dǎo)讀

在調(diào)用 lock 方法時(shí),會(huì)最終調(diào)用到 tryAcquireAsync。

調(diào)用鏈為:lock()->tryAcquire->tryAcquireAsync,詳細(xì)解釋如下:

private??RFuture?tryAcquireAsync(long?waitTime,?long?leaseTime,?TimeUnit?unit,?long?threadId)?{
????????RFuture?ttlRemainingFuture;
????????//如果指定了加鎖時(shí)間,會(huì)直接去加鎖
????????if?(leaseTime?!=?-1)?{
????????????ttlRemainingFuture?=?tryLockInnerAsync(waitTime,?leaseTime,?unit,?threadId,?RedisCommands.EVAL_LONG);
????????}?else?{
????????????//沒有指定加鎖時(shí)間?會(huì)先進(jìn)行加鎖,并且默認(rèn)時(shí)間就是?LockWatchdogTimeout的時(shí)間
????????????//這個(gè)是異步操作?返回RFuture?類似netty中的future
????????????ttlRemainingFuture?=?tryLockInnerAsync(waitTime,?internalLockLeaseTime,
????????????????????TimeUnit.MILLISECONDS,?threadId,?RedisCommands.EVAL_LONG);
????????}

????????//這里也是類似netty?Future?的addListener,在future內(nèi)容執(zhí)行完成后執(zhí)行
????????ttlRemainingFuture.onComplete((ttlRemaining,?e)?->?{
????????????if?(e?!=?null)?{
????????????????return;
????????????}

????????????//?lock?acquired
????????????if?(ttlRemaining?==?null)?{
????????????????//?leaseTime不為-1時(shí),不會(huì)自動(dòng)延期
????????????????if?(leaseTime?!=?-1)?{
????????????????????internalLockLeaseTime?=?unit.toMillis(leaseTime);
????????????????}?else?{
????????????????????//這里是定時(shí)執(zhí)行?當(dāng)前鎖自動(dòng)延期的動(dòng)作,leaseTime為-1時(shí),才會(huì)自動(dòng)延期
????????????????????scheduleExpirationRenewal(threadId);
????????????????}
????????????}
????????});
????????return?ttlRemainingFuture;
????}
scheduleExpirationRenewal 中會(huì)調(diào)用 renewExpiration 啟用了一個(gè) timeout 定時(shí),去執(zhí)行延期動(dòng)作。

private?void?renewExpiration()?{
????????ExpirationEntry?ee?=?EXPIRATION_RENEWAL_MAP.get(getEntryName());
????????if?(ee?==?null)?{
????????????return;
????????}

????????Timeout?task?=?commandExecutor.getConnectionManager()
??????????.newTimeout(new?TimerTask()?{
????????????@Override
????????????public?void?run(Timeout?timeout)?throws?Exception?{
????????????????//?省略部分代碼
????????????????....

????????????????RFuture?future?=?renewExpirationAsync(threadId);
????????????????future.onComplete((res,?e)?->?{
????????????????????....

????????????????????if?(res)?{
????????????????????????//如果?沒有報(bào)錯(cuò),就再次定時(shí)延期
????????????????????????//?reschedule?itself
????????????????????????renewExpiration();
????????????????????}?else?{
????????????????????????cancelExpirationRenewal(null);
????????????????????}
????????????????});
????????????}
????????????//?這里我們可以看到定時(shí)任務(wù)?是?lockWatchdogTimeout?的1/3時(shí)間去執(zhí)行?renewExpirationAsync
????????},?internalLockLeaseTime?/?3,?TimeUnit.MILLISECONDS);

????????ee.setTimeout(task);
????}
scheduleExpirationRenewal 會(huì)調(diào)用到 renewExpirationAsync,執(zhí)行下面這段 lua 腳本。

他主要判斷就是 這個(gè)鎖是否在 redis 中存在,如果存在就進(jìn)行 pexpire 延期。

protected?RFuture?renewExpirationAsync(long?threadId)?{
????????return?evalWriteAsync(getRawName(),?LongCodec.INSTANCE,?RedisCommands.EVAL_BOOLEAN,
????????????????"if?(redis.call('hexists',?KEYS[1],?ARGV[2])?==?1)?then?"?
????????????????????????"redis.call('pexpire',?KEYS[1],?ARGV[1]);?"?
????????????????????????"return?1;?"?
????????????????????????"end;?"?
????????????????????????"return?0;",
????????????????Collections.singletonList(getRawName()),
????????????????internalLockLeaseTime,?getLockName(threadId));
????}

  • watch dog 在當(dāng)前節(jié)點(diǎn)還存活且任務(wù)未完成則每 10 s 給鎖續(xù)期 30s。
  • 程序釋放鎖操作時(shí)因?yàn)楫惓]有被執(zhí)行,那么鎖無法被釋放,所以釋放鎖操作一定要放到 finally {} 中;
  • 要使 watchLog 機(jī)制生效 ,lock 時(shí) 不要設(shè)置 過期時(shí)間。
  • watchlog 的延時(shí)時(shí)間 可以由 lockWatchdogTimeout 指定默認(rèn)延時(shí)時(shí)間,但是不要設(shè)置太小。
  • watchdog 會(huì)每 lockWatchdogTimeout/3 時(shí)間,去延時(shí)。
  • 通過 lua 腳本實(shí)現(xiàn)延遲。

總結(jié)

完工,我建議你合上屏幕,自己在腦子里重新過一遍,每一步都在做什么,為什么要做,解決什么問題。

我們一起從頭到尾梳理了一遍 Redis 分布式鎖中的各種門道,其實(shí)很多點(diǎn)是不管用什么做分布式鎖都會(huì)存在的問題,重要的是思考的過程。

對(duì)于系統(tǒng)的設(shè)計(jì),每個(gè)人的出發(fā)點(diǎn)都不一樣,沒有完美的架構(gòu),沒有普適的架構(gòu),但是在完美和普適能平衡的很好的架構(gòu),就是好的架構(gòu)。

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅(qū)動(dòng)電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: 驅(qū)動(dòng)電源

在工業(yè)自動(dòng)化蓬勃發(fā)展的當(dāng)下,工業(yè)電機(jī)作為核心動(dòng)力設(shè)備,其驅(qū)動(dòng)電源的性能直接關(guān)系到整個(gè)系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動(dòng)勢(shì)抑制與過流保護(hù)是驅(qū)動(dòng)電源設(shè)計(jì)中至關(guān)重要的兩個(gè)環(huán)節(jié),集成化方案的設(shè)計(jì)成為提升電機(jī)驅(qū)動(dòng)性能的關(guān)鍵。

關(guān)鍵字: 工業(yè)電機(jī) 驅(qū)動(dòng)電源

LED 驅(qū)動(dòng)電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個(gè)照明設(shè)備的使用壽命。然而,在實(shí)際應(yīng)用中,LED 驅(qū)動(dòng)電源易損壞的問題卻十分常見,不僅增加了維護(hù)成本,還影響了用戶體驗(yàn)。要解決這一問題,需從設(shè)計(jì)、生...

關(guān)鍵字: 驅(qū)動(dòng)電源 照明系統(tǒng) 散熱

根據(jù)LED驅(qū)動(dòng)電源的公式,電感內(nèi)電流波動(dòng)大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關(guān)鍵字: LED 設(shè)計(jì) 驅(qū)動(dòng)電源

電動(dòng)汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產(chǎn)業(yè)的重要發(fā)展方向。電動(dòng)汽車的核心技術(shù)之一是電機(jī)驅(qū)動(dòng)控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機(jī)驅(qū)動(dòng)系統(tǒng)中的關(guān)鍵元件,其性能直接影響到電動(dòng)汽車的動(dòng)力性能和...

關(guān)鍵字: 電動(dòng)汽車 新能源 驅(qū)動(dòng)電源

在現(xiàn)代城市建設(shè)中,街道及停車場(chǎng)照明作為基礎(chǔ)設(shè)施的重要組成部分,其質(zhì)量和效率直接關(guān)系到城市的公共安全、居民生活質(zhì)量和能源利用效率。隨著科技的進(jìn)步,高亮度白光發(fā)光二極管(LED)因其獨(dú)特的優(yōu)勢(shì)逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關(guān)鍵字: 發(fā)光二極管 驅(qū)動(dòng)電源 LED

LED通用照明設(shè)計(jì)工程師會(huì)遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關(guān)鍵字: LED 驅(qū)動(dòng)電源 功率因數(shù)校正

在LED照明技術(shù)日益普及的今天,LED驅(qū)動(dòng)電源的電磁干擾(EMI)問題成為了一個(gè)不可忽視的挑戰(zhàn)。電磁干擾不僅會(huì)影響LED燈具的正常工作,還可能對(duì)周圍電子設(shè)備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來解決L...

關(guān)鍵字: LED照明技術(shù) 電磁干擾 驅(qū)動(dòng)電源

開關(guān)電源具有效率高的特性,而且開關(guān)電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機(jī)重量也有所下降,所以,現(xiàn)在的LED驅(qū)動(dòng)電源

關(guān)鍵字: LED 驅(qū)動(dòng)電源 開關(guān)電源

LED驅(qū)動(dòng)電源是把電源供應(yīng)轉(zhuǎn)換為特定的電壓電流以驅(qū)動(dòng)LED發(fā)光的電壓轉(zhuǎn)換器,通常情況下:LED驅(qū)動(dòng)電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: LED 隧道燈 驅(qū)動(dòng)電源
關(guān)閉