91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

最終一致性是現(xiàn)在大部分高可用的分布式系統(tǒng)的核心思路

Linux愛(ài)好者 ? 來(lái)源:四猿外 ? 作者:四猿外 ? 2021-06-17 14:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

這篇文章我們聊分布式相關(guān)的內(nèi)容。

提到分布式系統(tǒng),就一定繞不開(kāi)“一致性”,這次我們說(shuō)說(shuō):最終一致性。

最終一致性是現(xiàn)在大部分高可用的分布式系統(tǒng)的核心思路。

估計(jì)有人對(duì)最終一致性不太熟,先來(lái)個(gè)簡(jiǎn)單介紹:

最終一致性指的是系統(tǒng)中的所有分散在不同節(jié)點(diǎn)的數(shù)據(jù),經(jīng)過(guò)一定時(shí)間后,最終能夠達(dá)到符合業(yè)務(wù)定義的一致的狀態(tài)。

劃重點(diǎn):

是數(shù)據(jù)一致性,不是事務(wù)一致性(ACID 是事務(wù)一致性);

存在條件:多個(gè)節(jié)點(diǎn)/系統(tǒng);

不一致可能是暫時(shí)的,最終要一致(鬼知道“最終”是多久)

好,正文開(kāi)始。

莫看江面平如鏡,要看水底萬(wàn)丈深

最終一致性,一言以蔽之,過(guò)程松,結(jié)果緊。不管中間過(guò)程如何,結(jié)果必須符合業(yè)務(wù)需求,滿足數(shù)據(jù)一致性的要求。

雖然,在實(shí)現(xiàn)中,有各種花樣百出的方案,但是本質(zhì)的思想都是一樣的。我們現(xiàn)在就來(lái)忽略那些亂花迷眼的過(guò)程,仔細(xì)探討下最終一致性的本質(zhì)。

何事居窮道不窮,亂時(shí)還與凈時(shí)同

在我剛?cè)胄胁痪玫臅r(shí)候,能力有限,菜鳥(niǎo)一個(gè),只能做一些小的功能模塊。我印象最深的就是訂單模塊。

用戶下單,訂單模塊收到下單請(qǐng)求后,執(zhí)行對(duì)應(yīng)的訂單業(yè)務(wù)邏輯。最終,會(huì)把訂單插入到訂單表,并返回下單結(jié)果給用戶。用戶結(jié)算后,訂單模塊就會(huì)去根據(jù)支付情況去更新訂單狀態(tài)。

就這點(diǎn)事兒,對(duì)我這個(gè)技術(shù)渣渣來(lái)說(shuō),開(kāi)始也著實(shí)費(fèi)了一番手腳,不過(guò)最終也成了熟手,維護(hù)起這個(gè)模塊來(lái)也駕輕就熟了。

這種簡(jiǎn)單的小日子過(guò)了一陣子后,新任務(wù)來(lái)了!

產(chǎn)品經(jīng)理告訴我,數(shù)據(jù)審計(jì)部門(mén)想要我維護(hù)的這個(gè)訂單模塊在訂單完成后,能及時(shí)分發(fā)一份訂單數(shù)據(jù)給他們。他們提供了一個(gè)接口,讓我直接傳數(shù)據(jù)給他們。

兩個(gè)問(wèn)題出現(xiàn)了:

問(wèn)題 1:用戶等待時(shí)間變長(zhǎng)

最簡(jiǎn)單的實(shí)現(xiàn)就是我更新完訂單數(shù)據(jù)后,再順序去調(diào)用數(shù)據(jù)審計(jì)部門(mén)給的接口,把訂單數(shù)據(jù)傳過(guò)去。

但是,從用戶結(jié)算成功到更新訂單狀態(tài)這一系列的流程是同步的,假設(shè)這一系列流程所花費(fèi)的時(shí)間是 n 毫秒。這就意味著,用戶需要等待至少 n 毫秒。如果再加上傳給數(shù)據(jù)審計(jì)部門(mén)的操作時(shí)間,假設(shè)為 m 毫秒,則整個(gè)用戶就需要等待就 n+m 毫秒。

整個(gè)功能用戶等待時(shí)間成本上升,體驗(yàn)下降。

問(wèn)題 2:部分成功,部分失敗

引入新的接口后,某些時(shí)候調(diào)用這個(gè)接口可能會(huì)失敗,比如網(wǎng)絡(luò)問(wèn)題啊,驗(yàn)證問(wèn)題啊,接口服務(wù)失敗啊,很多原因。那么問(wèn)題來(lái)了,新接口失敗的時(shí)候怎么處理?

如果訂單更新成功,傳給數(shù)據(jù)審計(jì)部門(mén)的時(shí)候失敗了,這種情況會(huì)讓訂單模塊的后續(xù)處理變得很尷尬。

首先你不可能返回給客戶端說(shuō)你這次結(jié)算失敗了,請(qǐng)求就沒(méi)失敗,你憑什么說(shuō)人家失敗了?其次,你又不能說(shuō)這次業(yè)務(wù)上就是成功的,因?yàn)閿?shù)據(jù)審計(jì)其實(shí)還挺重要的,它是業(yè)務(wù)邏輯的重要組成部分。

真是進(jìn)退兩難。

這兩個(gè)問(wèn)題的解決方案其中之一就是最終一致性。

我們以前談到過(guò) CAP,知道如果犧牲一定的一致性就可以保證分區(qū)容錯(cuò)性和可用性。而最終一致性則是不能保證同時(shí)讓所有的數(shù)據(jù)當(dāng)時(shí)都符合業(yè)務(wù)需求,但是我們能保證任何時(shí)候服務(wù)在內(nèi)部出現(xiàn)問(wèn)題的時(shí)候都是可對(duì)外服務(wù)的。

四哥我平時(shí)喜歡玩游戲,那我們就用一個(gè)淘寶買(mǎi) Switch 的例子,來(lái)解釋最終一致性:

如果你想在淘寶同時(shí)買(mǎi)一個(gè) Switch 的數(shù)字版游戲和一臺(tái) Switch,那么你付完錢(qián)后,你就可以立刻得到數(shù)字版的游戲,但是,對(duì)于那臺(tái)購(gòu)買(mǎi)的 Switch,你就要等幾天,等到快遞投遞到家才可以拿到。

來(lái)梳理下這個(gè)例子的細(xì)節(jié):

首先淘寶上肯定得有個(gè)對(duì)顧客售賣(mài) Switch 和數(shù)字游戲的商家去接受我們下的訂單,并給你一個(gè)單號(hào)。

你得到了一個(gè)數(shù)字版游戲,但是沒(méi)拿到 Switch。

你不知道這個(gè)商家背后 Switch 是怎么給你準(zhǔn)備的,是不是中間他沒(méi)貨了還得跑別的商家串貨,又或者沒(méi)貨等了兩天才發(fā)給你(延遲發(fā)貨可以給出別的理由,不再贅述)。這些不重要,重要的是你明確對(duì)方接單了他就要完成這筆單子。

你下單成功之后,你就有了保障,你最終會(huì)拿到你的 Switch,只是你可能不太肯定什么時(shí)候收到。

過(guò)了幾天,你終于收到貨了,恩,恭喜你成功入坑 Switch。

上面的例子就是我們說(shuō)的最終一致性。但是,這里有個(gè)非常非常重要的東西還沒(méi)有凸顯出來(lái),即到底是什么樣的原因在驅(qū)使我們使用最終一致性?

答案就是數(shù)據(jù)的分發(fā)。

紙上得來(lái)終覺(jué)淺,絕知此事要躬行

為什么我們會(huì)出現(xiàn)需要最終一致性的情況呢?

因?yàn)槲覀冃枰褦?shù)據(jù)分發(fā)到不同的地方上去,而由于分發(fā)數(shù)據(jù)到不同的地方,就會(huì)導(dǎo)致,可能中間分發(fā)過(guò)程中出現(xiàn)分發(fā)成功或者失敗的不一致情況,就需要最終一致性這種思路來(lái)處理這些情況。

恩,分發(fā)數(shù)據(jù)……OK,你想到了吧?

沒(méi)錯(cuò),通過(guò) MQ 分發(fā)消息就可以處理分發(fā)數(shù)據(jù)的情況,而這正是最終一致性最常用的實(shí)現(xiàn)手段。

我們把要分發(fā)的數(shù)據(jù)打包成消息,再發(fā)送給 MQ 中間件。中間件會(huì)廣播這些數(shù)據(jù)給所有想要收到這些消息的服務(wù)。這些收到消息的服務(wù)就根據(jù)自己的業(yè)務(wù)情況對(duì)數(shù)據(jù)進(jìn)行獨(dú)立的處理。

回到我們訂單模塊的那個(gè)例子,我們可以采用兩種方式使用最終一致性。

先插入數(shù)據(jù)庫(kù),后發(fā)消息給數(shù)據(jù)審計(jì)

這個(gè)方式,訂單模塊先更新訂單狀態(tài)。然后,把訂單數(shù)據(jù)打包成消息發(fā)送到 MQ 中,訂單模塊的任務(wù)就結(jié)束了。剩下的任務(wù)就是由數(shù)據(jù)審計(jì)部門(mén)根據(jù)自己的業(yè)務(wù),從 MQ 中獲取消息后進(jìn)行對(duì)應(yīng)的處理。

這個(gè)方法里,我們既保證數(shù)據(jù)庫(kù)更新成功也保證數(shù)據(jù)被發(fā)送到了 MQ 中。最終,當(dāng)數(shù)據(jù)審計(jì)部門(mén)收到消息并根據(jù)消息內(nèi)容做完對(duì)應(yīng)的處理后,則整體數(shù)據(jù)達(dá)到最終一致的狀態(tài)。

只插入到 MQ 中

這個(gè)方式,訂單模塊直接收到請(qǐng)求后,將數(shù)據(jù)打包成消息放入到 MQ 中。

然后,再由訂單模塊自己和數(shù)據(jù)審計(jì)部門(mén)的服務(wù)分別從 MQ 中拿到對(duì)應(yīng)的消息,再各自根據(jù)自己的業(yè)務(wù)邏輯該更新數(shù)據(jù)庫(kù)的更新數(shù)據(jù)庫(kù),該走自己的審計(jì)的走自己的審計(jì),最終達(dá)到一致的狀態(tài)。

小荷才露尖尖角,早有蜻蜓立上頭

在以上的例子中,我們描述了最終一致性的核心思路,不保證數(shù)據(jù)狀態(tài)能實(shí)時(shí)滿足業(yè)務(wù)要求,但是就像我們?cè)诰€購(gòu)物一樣,我們能保證在間隔了一段時(shí)間窗口后肯定能滿足業(yè)務(wù)需求。

然而,雖然說(shuō)起來(lái)簡(jiǎn)單,但是世間上的事情又哪里那么容易呢?根據(jù)業(yè)務(wù)的不同,最終一致性分化出了多種實(shí)現(xiàn)思路。比如,

重試 + 逆向模式

在我們做支付時(shí),需要記賬,當(dāng)記賬不成功時(shí),我們可能希望能盡可能的重試。當(dāng)重試達(dá)到某種限制后,甚至我們還要通知上游系統(tǒng)去提供一個(gè)重試和取消接口,讓下游能通知上游重發(fā)消息,或者先暫時(shí)取消操作。

補(bǔ)救任務(wù)模式

在我們做支付記賬失敗了,我們又嘗試了重試 + 逆向模式取消了操作,那么此時(shí)就可以創(chuàng)建一個(gè)補(bǔ)救任務(wù),等到后期可以保證記賬成功的時(shí)候去執(zhí)行這個(gè)任務(wù)。

異步消息模式

在我們做轉(zhuǎn)賬的時(shí)候,我們肯定是要保證 A 轉(zhuǎn)出后 B 轉(zhuǎn)入這種業(yè)務(wù)是強(qiáng)一致性的。然而,可能此時(shí)又需要跨服務(wù)。同時(shí),我們還想盡量保證性能。那么,這個(gè)時(shí)候我們就可以先把本地對(duì)數(shù)據(jù)庫(kù)的寫(xiě)操作和要跨服務(wù)的消息做成事務(wù),然后,后期再根據(jù)消息被處理的狀態(tài)做整體事務(wù)的提交和回滾。

可以看到,最終一致性的實(shí)現(xiàn)方式是多種多樣的,但是,它始終逃不過(guò)一個(gè)核心,通過(guò)消息隊(duì)列分發(fā)數(shù)據(jù)。在明白了這個(gè)根本原則后,以后我們理解各種各樣的分布式事務(wù),分布式共識(shí)等就會(huì)容易許多了。

原文標(biāo)題:最終一致性,一致只會(huì)遲到,但絕不會(huì)缺席

文章出處:【微信公眾號(hào):Linux愛(ài)好者】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7335

    瀏覽量

    94748
  • 分布式系統(tǒng)
    +關(guān)注

    關(guān)注

    0

    文章

    151

    瀏覽量

    19885

原文標(biāo)題:最終一致性,一致只會(huì)遲到,但絕不會(huì)缺席

文章出處:【微信號(hào):LinuxHub,微信公眾號(hào):Linux愛(ài)好者】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    比斯特通用分選機(jī)四線制測(cè)試技術(shù)保障電芯性能一致性

    電芯的性能一致性直接決定了終端產(chǎn)品的安全、續(xù)航能力與使用壽命,然而,受制于原材料差異、制造工藝波動(dòng)等因素,即使是同批次生產(chǎn)的電芯,其電壓、內(nèi)阻等關(guān)鍵參數(shù)仍存在微小偏差。深圳比斯特自動(dòng)化設(shè)備
    的頭像 發(fā)表于 01-29 16:20 ?150次閱讀
    比斯特通用分選機(jī)四線制測(cè)試技術(shù)保障電芯性能<b class='flag-5'>一致性</b>

    以太網(wǎng)一致性測(cè)試全解析:保障高性能網(wǎng)絡(luò)的關(guān)鍵技術(shù)

    在高速網(wǎng)絡(luò)設(shè)備的設(shè)計(jì)與制造中,以太網(wǎng)一致性測(cè)試是確保產(chǎn)品性能穩(wěn)定、符合行業(yè)標(biāo)準(zhǔn)的關(guān)鍵環(huán)節(jié)。我們能夠?yàn)榭蛻籼峁臏y(cè)試標(biāo)準(zhǔn)解讀到實(shí)際問(wèn)題排查的全方位支持。本文將以100Base-TX和1000Base-T為例,系統(tǒng)介紹以太網(wǎng)一致性測(cè)
    的頭像 發(fā)表于 01-20 17:42 ?1108次閱讀
    以太網(wǎng)<b class='flag-5'>一致性</b>測(cè)試全解析:保障高性能網(wǎng)絡(luò)的關(guān)鍵技術(shù)

    ±0.4kHz精度探索:解析超聲切割核心部件的批次一致性管理

    在工業(yè)制造中,設(shè)備的長(zhǎng)期穩(wěn)定性與核心部件性能的一致性密切相關(guān)。對(duì)于使用超聲波切割設(shè)備的用戶而言,可能遇到過(guò)這樣的情形:不同批次的設(shè)備或更換核心部件后,切割效果出現(xiàn)細(xì)微差異,需要重新調(diào)試。這背后,
    的頭像 發(fā)表于 01-14 17:12 ?533次閱讀
    ±0.4kHz精度探索:解析超聲切割<b class='flag-5'>核心</b>部件的批次<b class='flag-5'>一致性</b>管理

    儲(chǔ)能電池一致性,已成核心競(jìng)爭(zhēng)力

    參數(shù)上的匹配程度,是決定電池組性能、壽命和安全核心因素之。 ? 當(dāng)前行業(yè)面臨的一致性挑戰(zhàn)已從過(guò)去的可選優(yōu)化項(xiàng)變?yōu)槿缃癖仨毭鎸?duì)的問(wèn)題,尤其在電網(wǎng)側(cè)儲(chǔ)能、新能源汽車(chē)等對(duì)安全和長(zhǎng)壽命要
    的頭像 發(fā)表于 01-08 16:37 ?2490次閱讀

    比斯特1810B自動(dòng)分選機(jī)實(shí)現(xiàn)電池性能一致性的保障設(shè)備

    在動(dòng)力電池和儲(chǔ)能系統(tǒng)快速發(fā)展的當(dāng)下,電池性能一致性已成為衡量產(chǎn)品質(zhì)量的關(guān)鍵指標(biāo)。一致性將直接影響電池組的整體性能發(fā)揮,更關(guān)乎產(chǎn)品的安全可靠和使用壽命。深圳比斯特自動(dòng)化設(shè)備有限公司推出
    的頭像 發(fā)表于 01-06 17:06 ?507次閱讀
    比斯特1810B自動(dòng)分選機(jī)實(shí)現(xiàn)電池性能<b class='flag-5'>一致性</b>的保障設(shè)備

    有關(guān)100M、1000M以太網(wǎng)一致性測(cè)試問(wèn)題探討交流

    100M、1000M以太網(wǎng)一致性測(cè)試
    的頭像 發(fā)表于 12-14 10:42 ?495次閱讀
    有關(guān)100M、1000M以太網(wǎng)<b class='flag-5'>一致性</b>測(cè)試問(wèn)題探討交流

    深入理解分布式共識(shí)算法 Raft

    “不可靠的網(wǎng)絡(luò)”、“不穩(wěn)定的時(shí)鐘”和“節(jié)點(diǎn)的故障”都是在分布式系統(tǒng)中常見(jiàn)的問(wèn)題,在文章開(kāi)始前,我們先來(lái)看下:如果在分布式系統(tǒng)中網(wǎng)絡(luò)不可靠會(huì)
    的頭像 發(fā)表于 11-27 14:51 ?307次閱讀
    深入理解<b class='flag-5'>分布式</b>共識(shí)算法 Raft

    電纜組件相位一致性的意義

    、技術(shù)本質(zhì):定義與量化指標(biāo) 相位一致性描述的是多通道電纜組件在相同頻率與輸入信號(hào)下,各通道輸出信號(hào)相位差的穩(wěn)定程度。核心衡量指標(biāo)包括: 相位偏差 :?jiǎn)瓮ǖ老辔坏牟▌?dòng)范圍 通道間相位差 :多通道之間
    的頭像 發(fā)表于 11-27 13:41 ?306次閱讀
    電纜組件相位<b class='flag-5'>一致性</b>的意義

    請(qǐng)教大家下DP一致性測(cè)試問(wèn)題

    請(qǐng)教大家下,DP的Vbios中已經(jīng)固定了預(yù)加重和Swing的值,DP的TX信號(hào)一致性測(cè)試項(xiàng)中Non Pre-Emphasis Level Test(Swing2/Swing0)-PLTPAT,這個(gè)測(cè)試項(xiàng)意思是Swing2與Swing0偏差嗎?已經(jīng)固定了Swing中,這
    發(fā)表于 11-12 15:57

    直播回顧 | 深度解讀CAN總線一致性測(cè)試的四大層級(jí)與實(shí)戰(zhàn)方法,虹科技術(shù)直播助您破解汽車(chē)通信穩(wěn)定性的關(guān)鍵

    ?直播主題CAN總線一致性測(cè)試“一致性測(cè)試是保障總線系統(tǒng)穩(wěn)定、兼容、可靠運(yùn)行的核心環(huán)節(jié)?!彪S著整車(chē)電子電氣架構(gòu)日益復(fù)雜,ECU數(shù)量增多、通信負(fù)載加大,CAN節(jié)點(diǎn)之間若存在電氣特性不匹配
    的頭像 發(fā)表于 10-30 17:34 ?2304次閱讀
    直播回顧 |  深度解讀CAN總線<b class='flag-5'>一致性</b>測(cè)試的四大層級(jí)與實(shí)戰(zhàn)方法,虹科技術(shù)直播助您破解汽車(chē)通信穩(wěn)定性的關(guān)鍵

    鏡頭不一致的問(wèn)題原因分析

    在機(jī)器視覺(jué)系統(tǒng)的視界,鏡頭一致性猶如維系整個(gè)生態(tài)的隱形生命線,貫穿于光學(xué)成像、圖像處理到智能決策的全鏈路,其細(xì)微波動(dòng)足以顛覆整個(gè)檢測(cè)系統(tǒng)的可靠。當(dāng)工業(yè)界熱衷于討論算法精度與算力突破時(shí)
    的頭像 發(fā)表于 09-11 09:45 ?1202次閱讀

    Ceph分布式存儲(chǔ)系統(tǒng)解析

    在當(dāng)今數(shù)據(jù)爆炸的時(shí)代,企業(yè)對(duì)存儲(chǔ)系統(tǒng)的需求日益增長(zhǎng),傳統(tǒng)的集中式存儲(chǔ)已經(jīng)無(wú)法滿足大規(guī)模數(shù)據(jù)處理的要求。分布式存儲(chǔ)系統(tǒng)應(yīng)運(yùn)而生,而Ceph作為開(kāi)源分布式存儲(chǔ)
    的頭像 發(fā)表于 07-14 11:15 ?993次閱讀

    車(chē)用鋰離子電池機(jī)理建模與并聯(lián)模組不一致性研究

    車(chē)用鋰離子電池機(jī)理建模與并聯(lián)模組不一致性研究
    發(fā)表于 05-16 21:02

    堆焊熔池輪廓實(shí)時(shí)監(jiān)控,實(shí)現(xiàn)工藝穩(wěn)定性與焊縫一致性

    及稀釋程度等關(guān)鍵參數(shù)對(duì)焊層質(zhì)量有直接影響,實(shí)時(shí)監(jiān)控熔池輪廓和溫度分布可及時(shí)預(yù)警缺陷并指導(dǎo)參數(shù)優(yōu)化,以保證焊層一致性與工藝穩(wěn)定性。今天起了解堆焊熔池輪廓實(shí)時(shí)監(jiān)控,實(shí)現(xiàn)工藝穩(wěn)定性與焊縫一致性
    的頭像 發(fā)表于 04-24 17:15 ?662次閱讀
    堆焊熔池輪廓實(shí)時(shí)監(jiān)控,實(shí)現(xiàn)工藝穩(wěn)定性與焊縫<b class='flag-5'>一致性</b>

    一致性校正與邊緣融合拼接

    電子發(fā)燒友網(wǎng)站提供《差一致性校正與邊緣融合拼接.pdf》資料免費(fèi)下載
    發(fā)表于 04-10 18:02 ?0次下載