久久国产乱子伦精品免费M,亚洲一区二区三区91,欧美国产在线视频,国产精品视频久久

Redis讀寫分離技術(shù)解析

背景

Redis 不管主從版還是集群規(guī)格,replica作為備庫不對外提供服務(wù),只有在發(fā)生HA的時候,replica提升為master后才承擔(dān)讀寫流量。這種架構(gòu)讀寫請求都在master上完成,一致性較高,但性能受到master數(shù)量的限制。經(jīng)常有用戶數(shù)據(jù)較少,但因為流量或者并發(fā)太高而不得不升級到更大的集群規(guī)格。

為滿足讀多寫少的業(yè)務(wù)場景,最大化節(jié)約用戶成本,云數(shù)據(jù)庫Redis版推出了讀寫分離規(guī)格,為用戶提供透明、高可用、高性能、高靈活的讀寫分離服務(wù)

架構(gòu)

Redis集群模式有redis-proxy、master、replica、HA等幾個角色。在讀寫分離實例中,新增read-only replica角色來承擔(dān)讀流量,replica作為熱備不提供服務(wù),架構(gòu)上保持對現(xiàn)有集群規(guī)格的兼容性。redis-proxy按權(quán)重將讀寫請求轉(zhuǎn)發(fā)到master或者某個read-only replica上;HA負責(zé)監(jiān)控DB節(jié)點的健康狀態(tài),異常時發(fā)起主從切換或重搭read-only replica,并更新路由。

一般來說,根據(jù)master和read-only replica的數(shù)據(jù)同步方式,可以分為兩種架構(gòu):星型復(fù)制和鏈式復(fù)制。

星型復(fù)制

星型復(fù)制就是將所有的read-only replica直接和master保持同步,每個read-only replica之間相互獨立,任何一個節(jié)點異常不影響到其他節(jié)點,同時因為復(fù)制鏈比較短,read-only replica上的復(fù)制延遲比較小。

Redis是單進程單線程模型,主從之間的數(shù)據(jù)復(fù)制也在主線程中處理,read-only replica數(shù)量越多,數(shù)據(jù)同步對master的CPU消耗就越嚴重,集群的寫入性能會隨著read-only replica的增加而降低。此外,星型架構(gòu)會讓master的出口帶寬隨著read-only replica的增加而成倍增長。Master上較高的CPU和網(wǎng)絡(luò)負載會抵消掉星型復(fù)制延遲較低的優(yōu)勢,因此,星型復(fù)制架構(gòu)會帶來比較嚴重的擴展問題,整個集群的性能會受限于master。

Redis讀寫分離技術(shù)解析

鏈式復(fù)制

鏈式復(fù)制將所有的read-only replica組織成一個復(fù)制鏈,如下圖所示,master只需要將數(shù)據(jù)同步給replica和復(fù)制鏈上的第一個read-only replica。

鏈式復(fù)制解決了星型復(fù)制的擴展問題,理論上可以無限增加read-only replica的數(shù)量,隨著節(jié)點的增加整個集群的性能也可以基本上呈線性增長。

鏈式復(fù)制的架構(gòu)下,復(fù)制鏈越長,復(fù)制鏈末端的read-only replica和master之間的同步延遲就越大,考慮到讀寫分離主要使用在對一致性要求不高的場景下,這個缺點一般可以接受。但是如果復(fù)制鏈中的某個節(jié)點異常,會導(dǎo)致下游的所有節(jié)點數(shù)據(jù)都會大幅滯后。更加嚴重的是這可能帶來全量同步,并且全量同步將一直傳遞到復(fù)制鏈的末端,這會對服務(wù)帶來一定的影響。為了解決這個問題,讀寫分離的Redis都使用阿里云優(yōu)化后的binlog復(fù)制版本,最大程度的降低全量同步的概率。

Redis讀寫分離技術(shù)解析

Redis讀寫分離優(yōu)勢

  • 透明兼容

讀寫分離和普通集群規(guī)格一樣,都使用了redis-proxy做請求轉(zhuǎn)發(fā),多分片令使用存在一定的限制,但從主從升級單分片讀寫分離,或者從集群升級到多分片的讀寫分離集群可以做到完全兼容。

用戶和redis-proxy建立連接,redis-proxy會識別出客戶端連接發(fā)送過來的請求是讀還是寫,然后按照權(quán)重作負載均衡,將請求轉(zhuǎn)發(fā)到后端不同的DB節(jié)點中,寫請求轉(zhuǎn)發(fā)給master,讀操作轉(zhuǎn)發(fā)給read-only replica(master默認也提供讀,可以通過權(quán)重控制)。

用戶只需要購買讀寫分離規(guī)格的實例,直接使用任何客戶端即可直接使用,業(yè)務(wù)不用做任何修改就可以開始享受讀寫分離服務(wù)帶來的巨大性能提升,接入成本幾乎為0。

  • 高可用

高可用模塊(HA)監(jiān)控所有DB節(jié)點的健康狀態(tài),為整個實例的可用性保駕護航。master宕機時自動切換到新主。如果某個read-only replica宕機,HA也能及時感知,然后重搭一個新的read-only replica,下線宕機節(jié)點。

除HA之外,redis-proxy也能實時感知每個read-only replica的狀態(tài)。在某個read-only replica異常期間,redis-proxy會自動降低這個節(jié)點的權(quán)重,如果發(fā)現(xiàn)某個read-only replica連續(xù)失敗超過一定次數(shù)以后,會暫時屏蔽異常節(jié)點,直到異常消失以后才會恢復(fù)其正常權(quán)重。

redis-proxy和HA一起做到盡量減少業(yè)務(wù)對后端異常的感知,提高服務(wù)可用性。

  • 高性能

對于讀多寫少的業(yè)務(wù)場景,直接使用集群版本往往不是最合適的方案,現(xiàn)在讀寫分離提供了更多的選擇,業(yè)務(wù)可以根據(jù)場景選擇最適合的規(guī)格,充分利用每一個read-only replica的資源。目前單shard對外售賣1 master + 1/3/5 read-only replica多種規(guī)格(如果有更大的需求可以提工單反饋),提供60萬QPS和192 MB/s的服務(wù)能力,在完全兼容所有命令的情況下突破單機的資源限制。后續(xù)將去掉規(guī)格限制,讓用戶根據(jù)業(yè)務(wù)流量隨時自由的增加或減少read-only replica數(shù)量。

Redis讀寫分離技術(shù)解析

Redis主從異步復(fù)制,從read-only replica中可能讀到舊的數(shù)據(jù),使用讀寫分離需要業(yè)務(wù)可以容忍一定程度的數(shù)據(jù)不一致,后續(xù)將會給客戶更靈活的配置和更大的自由,例如配置可以容忍的最大延遲時間。

作者:小熱愛
鏈接:https://juejin.cn/post/6955355686108659726

(版權(quán)歸原作者所有,侵刪)

相關(guān)新聞

歷經(jīng)多年發(fā)展,已成為國內(nèi)好評如潮的Linux云計算運維、SRE、Devops、網(wǎng)絡(luò)安全、云原生、Go、Python開發(fā)專業(yè)人才培訓(xùn)機構(gòu)!

    1. 主站蜘蛛池模板: 汶川县| 子长县| 凤翔县| 启东市| 长汀县| 开阳县| 乌什县| 安宁市| 汉沽区| 隆昌县| 叶城县| 正安县| 阿荣旗| 益阳市| 永兴县| 辉县市| 青海省| 泰州市| 罗山县| 万州区| 吐鲁番市| 卢龙县| 金门县| 焦作市| 泰和县| 沈丘县| 喀喇沁旗| 稷山县| 丹棱县| 洞头县| 镇坪县| 长岭县| 万源市| 牙克石市| 绥阳县| 淳化县| 宝兴县| 绵竹市| 尼玛县| 东兴市| 新乡县|