安徽聯(lián)想分布式存儲(chǔ)的一般架構(gòu)

分布式存儲(chǔ)系統(tǒng)需要使用多臺(tái)服務(wù)器共同存儲(chǔ)數(shù)據(jù)，而隨著服務(wù)器數(shù)量的增加，服務(wù)器出現(xiàn)故障的概率也在不斷增加。為了保證在有服務(wù)器出現(xiàn)故障的情況下系統(tǒng)仍然可用。一般做法是把一個(gè)數(shù)據(jù)分成多份存儲(chǔ)在不同的服務(wù)器中。但是由于故障和并行存儲(chǔ)等情況的存在，同一個(gè)數(shù)據(jù)的多個(gè)副本之間可能存在不一致的情況。這里稱(chēng)保證多個(gè)副本的數(shù)據(jù)完全一致的性質(zhì)為一致性。分布式存儲(chǔ)系統(tǒng)需要多臺(tái)服務(wù)器同時(shí)工作。當(dāng)服務(wù)器數(shù)量增多時(shí)，其中的一些服務(wù)器出現(xiàn)故障是在所難免的。我們希望這樣的情況不會(huì)對(duì)整個(gè)系統(tǒng)造成太大的影響。在系統(tǒng)中的一部分節(jié)點(diǎn)出現(xiàn)故障之后，系統(tǒng)的整體不影響客服端的讀/寫(xiě)請(qǐng)求稱(chēng)為可用性。 布式存儲(chǔ)可實(shí)現(xiàn)集群的健康監(jiān)測(cè)，在故障潛伏期即可實(shí)現(xiàn)故障提醒。安徽聯(lián)想分布式存儲(chǔ)的一般架構(gòu)

    分布式存儲(chǔ)的興起與互聯(lián)網(wǎng)的發(fā)展密不可分，互聯(lián)網(wǎng)公司由于其數(shù)據(jù)量大而資本積累少，而通常都使用大規(guī)模分布式存儲(chǔ)系統(tǒng)。與傳統(tǒng)的高duan服務(wù)器、高duan存儲(chǔ)器和高duan處理器不同的是，互聯(lián)網(wǎng)公司的分布式存儲(chǔ)系統(tǒng)由數(shù)量眾多的、低成本和高性?xún)r(jià)比的普通PC服務(wù)器通過(guò)網(wǎng)絡(luò)連接而成。其主要原因有以下三點(diǎn)（1）互聯(lián)網(wǎng)的業(yè)務(wù)發(fā)展很快，而且注意成本消耗，這就使得存儲(chǔ)系統(tǒng)不能依靠傳統(tǒng)的縱向擴(kuò)展的方式，即先買(mǎi)小型機(jī)，不夠時(shí)再買(mǎi)中型機(jī)，甚至大型機(jī)?；ヂ?lián)網(wǎng)后端的分布式系統(tǒng)要求支持橫向擴(kuò)展，即通過(guò)增加普通PC服務(wù)器來(lái)提高系統(tǒng)的整體處理能力。（2）普通PC服務(wù)器性?xún)r(jià)比高，故障率也高，需要在軟件層面實(shí)現(xiàn)自動(dòng)容錯(cuò)，保證數(shù)據(jù)的一致性。（3）另外，隨著服務(wù)器的不斷加入，需要能夠在軟件層面實(shí)現(xiàn)自動(dòng)負(fù)載均衡，使得系統(tǒng)的處理能力得到線(xiàn)性擴(kuò)展。 連云港四大開(kāi)源分布式存儲(chǔ)架構(gòu)實(shí)戰(zhàn)分布式存儲(chǔ)系統(tǒng)中的多臺(tái)服務(wù)器通過(guò)網(wǎng)絡(luò)進(jìn)行連接。

    在分布式存儲(chǔ)系統(tǒng)（包括OceanBase這樣的分布式數(shù)據(jù)庫(kù)）的使用中，我們經(jīng)常會(huì)提到“一致性”這個(gè)詞，但是這個(gè)術(shù)語(yǔ)在不同的系統(tǒng)、不同人的心目中有不同的內(nèi)涵，很容易造成混淆。想象一個(gè)簡(jiǎn)單的存儲(chǔ)系統(tǒng)，只有一個(gè)客戶(hù)端（單進(jìn)程）和一個(gè)服務(wù)端（單進(jìn)程服務(wù)）?？蛻?hù)端順序發(fā)起讀寫(xiě)操作，服務(wù)端也順序處理每個(gè)請(qǐng)求，那么無(wú)論從服務(wù)器視角還是從客戶(hù)端視角，后一個(gè)操作都可以看到前一個(gè)操作的結(jié)果。然后，系統(tǒng)變的復(fù)雜一些，系統(tǒng)還是單個(gè)服務(wù)進(jìn)程（單副本），但是有多個(gè)客戶(hù)端并發(fā)進(jìn)行操作。這個(gè)模型下，多個(gè)客戶(hù)端的操作會(huì)互相影響，比如一個(gè)客戶(hù)端會(huì)讀到不是自己寫(xiě)的數(shù)據(jù)（另一個(gè)客戶(hù)端寫(xiě)入的）。一般單機(jī)并發(fā)程序就是這樣的模型，比如多個(gè)線(xiàn)程共享內(nèi)存的程序中。

為了保證分布式存儲(chǔ)系統(tǒng)的高可靠和高可用，數(shù)據(jù)在系統(tǒng)中一般存儲(chǔ)多個(gè)副本。當(dāng)某個(gè)副本所在的存儲(chǔ)節(jié)點(diǎn)出現(xiàn)故障時(shí)，分布式存儲(chǔ)系統(tǒng)能夠自動(dòng)將服務(wù)切換到其他的副本，從而實(shí)現(xiàn)自動(dòng)容錯(cuò)。分布式存儲(chǔ)系統(tǒng)通過(guò)復(fù)制協(xié)議將數(shù)據(jù)同步到多個(gè)存儲(chǔ)節(jié)點(diǎn)，并確保多個(gè)副本之間的數(shù)據(jù)一致性?？蛻?hù)端將寫(xiě)請(qǐng)求發(fā)送給主副本，主副本將寫(xiě)請(qǐng)求復(fù)制到其他備副本，常見(jiàn)的做法是同步操作日志（CommitLog）。主副本首先將操作日志同步到備副本，備副本回放操作日志，完成后通知主副本。接著，主副本修改本機(jī)，等到所有的操作都完成后再通知客戶(hù)端寫(xiě)成功。下圖中的復(fù)制協(xié)議要求主備同步成功才可以返回客戶(hù)端寫(xiě)成功，這種協(xié)議稱(chēng)為強(qiáng)同步協(xié)議。 分布式存儲(chǔ)是未來(lái)趨勢(shì)。

說(shuō)起分布式存儲(chǔ)，大家可能都會(huì)覺(jué)得這是一個(gè)老生常談的問(wèn)題，雖然分布式存儲(chǔ)并不是一個(gè)年輕的技術(shù)，許多開(kāi)發(fā)者也對(duì)分布式存儲(chǔ)耳熟能詳，但分布式存儲(chǔ)卻并不是像想象中的那種簡(jiǎn)單的技術(shù)，它是一個(gè)涉及到文件系統(tǒng)、存儲(chǔ)系統(tǒng)、網(wǎng)絡(luò)、算法、管理等多方面技術(shù)的匯聚，因此，要想真正的掌握分布式存儲(chǔ)技術(shù)，絕不是一件輕松的事。但對(duì)于開(kāi)發(fā)者來(lái)說(shuō)，如果不了解分布式存儲(chǔ)技術(shù)，實(shí)際上對(duì)他們的開(kāi)發(fā)工作還是會(huì)有很大的影響，特別是現(xiàn)在基于互聯(lián)網(wǎng)的開(kāi)發(fā)更是離不開(kāi)對(duì)分布式存儲(chǔ)技術(shù)的深入了解。 三萬(wàn)英尺看分布式存儲(chǔ)中本地存儲(chǔ)引擎。寧波數(shù)據(jù)分布式存儲(chǔ)系統(tǒng)原理解析

分布式存儲(chǔ)在數(shù)據(jù)治理過(guò)程中的優(yōu)勢(shì)。安徽聯(lián)想分布式存儲(chǔ)的一般架構(gòu)

分布式存儲(chǔ)分為文件存儲(chǔ)、對(duì)象存儲(chǔ)和塊存儲(chǔ)，但它們?nèi)N存儲(chǔ)方式的基本架構(gòu)都是大同小異的。即客戶(hù)端或應(yīng)用端、元數(shù)據(jù)（MDS）服務(wù)器和數(shù)據(jù)節(jié)點(diǎn)服務(wù)器?？蛻?hù)端和元數(shù)據(jù)服務(wù)器之間交互是“信令交互”，而客戶(hù)端到數(shù)據(jù)節(jié)點(diǎn)是“媒體交互”。元數(shù)據(jù)服務(wù)器或通過(guò)數(shù)據(jù)節(jié)點(diǎn)服務(wù)器獲取各節(jié)點(diǎn)服務(wù)器的基本配置情況和狀態(tài)信息。比如，客戶(hù)端需要讀取某一個(gè)文件的信息，客戶(hù)端會(huì)將相應(yīng)的要求發(fā)給元數(shù)據(jù)服務(wù)器：“喂！我需要XXX，存在哪里了”，元數(shù)據(jù)服務(wù)器查詢(xún)后回答“你到xxx服務(wù)器的xxx地址+xxx服務(wù)器的xxx地址取”。客戶(hù)端拿到這個(gè)指示后，向這2臺(tái)服務(wù)器發(fā)出指令，數(shù)據(jù)節(jié)點(diǎn)獲得指令后，將相應(yīng)的數(shù)據(jù)返回給客戶(hù)端。 安徽聯(lián)想分布式存儲(chǔ)的一般架構(gòu)

江蘇魏晉元興智能科技有限公司致力于數(shù)碼、電腦，是一家貿(mào)易型的公司。公司業(yè)務(wù)分為網(wǎng)絡(luò)安全，VR,MR，VR，AI，視頻監(jiān)控安防，出入口門(mén)禁失控制等，目前不斷進(jìn)行創(chuàng)新和服務(wù)改進(jìn)，為客戶(hù)提供良好的產(chǎn)品和服務(wù)。公司從事數(shù)碼、電腦多年，有著創(chuàng)新的設(shè)計(jì)、強(qiáng)大的技術(shù)，還有一批**的專(zhuān)業(yè)化的隊(duì)伍，確保為客戶(hù)提供良好的產(chǎn)品及服務(wù)。魏晉元興智能憑借創(chuàng)新的產(chǎn)品、專(zhuān)業(yè)的服務(wù)、眾多的成功案例積累起來(lái)的聲譽(yù)和口碑，讓企業(yè)發(fā)展再上新高。