如果抽出一塊正常工作的服務(wù)器硬盤，會發(fā)生什么？

　如果抽出一塊正常工作的服務(wù)器硬盤，結(jié)果會怎樣？數(shù)據(jù)會不會丟？業(yè)務(wù)會不會受影響？答案是，不會丟！不受影響！保護(hù)“使命重大”的硬盤，分兩步走，下面以騰訊云為例：

　　先判斷硬盤狀態(tài)，看看數(shù)據(jù)丟沒丟

　　如果一塊正常工作的硬盤被抽出，服務(wù)器首先會做出反應(yīng)。

　　服務(wù)器在硬盤讀寫數(shù)據(jù)時(shí)，設(shè)有特殊校驗(yàn)節(jié)點(diǎn)進(jìn)行定時(shí)檢查。 校驗(yàn)節(jié)點(diǎn)是數(shù)據(jù)存儲的“邊界”，節(jié)點(diǎn)之間的數(shù)據(jù)構(gòu)成了存儲的一個(gè)單位。服務(wù)器通過檢查這些節(jié)點(diǎn)是否正常、完備，可以判斷存儲服務(wù)是否正常。

　　如果抽出的硬盤重新插入后，服務(wù)器發(fā)現(xiàn)節(jié)點(diǎn)正常，就會判斷數(shù)據(jù)沒有缺失，硬盤會進(jìn)入正常運(yùn)行狀態(tài)。 但如果被抽出的硬盤正在讀寫數(shù)據(jù)，節(jié)點(diǎn)丟失，服務(wù)器會發(fā)起請求，申請?zhí)鎿Q新硬盤，并在其他硬盤上恢復(fù)損失的用戶數(shù)據(jù)。

　　如果數(shù)據(jù)丟了，怎么找回來？

　　如果被抽出的硬盤正在讀寫數(shù)據(jù)，怎么保證用戶服務(wù)不受影響？ 分情況。

　　根據(jù)存儲需求的不同，騰訊云為用戶準(zhǔn)備了CBS（云硬盤）、CFS（文件存儲）、COS（對象存儲）等多種服務(wù)來存儲數(shù)據(jù)、運(yùn)行業(yè)務(wù)。

　　這些服務(wù)都使用多副本技術(shù)保障用戶服務(wù)。但服務(wù)不同，技術(shù)也不同： 一種是COS使用的騰訊自研存儲引擎YottaStore中采用的糾刪碼冗余技術(shù)。 當(dāng)用戶寫入1份數(shù)據(jù)時(shí)，YottaStore技術(shù)會將其均勻分成若干份數(shù)據(jù)塊、校驗(yàn)塊。每個(gè)分組由k個(gè)數(shù)據(jù)塊和n個(gè)校驗(yàn)塊組成，最后打散存儲到磁盤中。 這些數(shù)據(jù)塊和校驗(yàn)塊分組數(shù)量可以多達(dá)兩位數(shù)，分別放置在不同園區(qū)、不同機(jī)架、不同服務(wù)器的硬盤中，同一塊硬盤上只放一個(gè)副本數(shù)據(jù)。

　　如果檢查到硬盤出現(xiàn)掉線或損壞等故障——YottaStore檢測到某處數(shù)據(jù)塊或校驗(yàn)塊被判斷為不可用時(shí)，就會立即停用這部分?jǐn)?shù)據(jù)。

　　緊接著，會用糾刪碼等技術(shù)將其他組的數(shù)據(jù)塊、校驗(yàn)塊重建丟失數(shù)據(jù)，并更新到其他硬盤當(dāng)中。

　　另一種是是騰訊自研存儲產(chǎn)品CBS和CFS采用的「三副本技術(shù)」。 CBS和CFS服務(wù)，會把用戶存儲數(shù)據(jù)，拆分成若干固定大小的數(shù)據(jù)塊，寫入不同機(jī)柜不同服務(wù)器的不同硬盤中，共有三個(gè)副本。 如果硬盤被抽出，用戶發(fā)起的請求，將指向正常工作的副本，用戶服務(wù)不受影響。

　　CBS和CFS的系統(tǒng)也會進(jìn)行自檢。檢查到因硬盤故障（設(shè)備只讀、節(jié)點(diǎn)宕機(jī)）或網(wǎng)絡(luò)故障（如鏈路異常或斷開、網(wǎng)絡(luò)探測延遲增大等）導(dǎo)致其中一個(gè)副本不可用時(shí)，系統(tǒng)會將其剔除。 三副本技術(shù)會自動發(fā)起副本恢復(fù)，在最短的時(shí)間內(nèi)將用戶數(shù)據(jù)恢復(fù)成三副本的工作狀態(tài)。

　　當(dāng)然，如果因?yàn)橐恍┢渌颍瑢?dǎo)致多副本或三副本全部丟失，不在本文討論范圍之內(nèi)。

　　其實(shí)，服務(wù)器和底層存儲技術(shù)方面的技術(shù)只是硬盤、用戶數(shù)據(jù)保護(hù)中的冰山一角。

　　現(xiàn)實(shí)中，抽出一塊正常運(yùn)行硬盤幾乎不可能：

　　硬盤本身有生命周期，硬盤替換是常規(guī)操作。為準(zhǔn)確運(yùn)維，騰訊云的硬盤都給拉手條設(shè)計(jì)LED指示燈，作為待運(yùn)維硬盤的位置指示，顏色和閃爍頻率代表硬盤的健康狀態(tài)；

　　抽出硬盤對服務(wù)器整體幾乎不會造成影響。硬盤設(shè)有獨(dú)立電子斷路器eFuse，可實(shí)現(xiàn)插拔電源緩啟動、去抖和硬盤故障隔離，避免電壓變化影響其它硬盤和服務(wù)器工作；

　　數(shù)據(jù)中心內(nèi)外有多重安保措施，實(shí)時(shí)監(jiān)控服務(wù)器和網(wǎng)絡(luò)設(shè)備開機(jī)狀態(tài)。進(jìn)入服務(wù)器存儲區(qū)間，要經(jīng)過生物識別+門禁卡雙重識別；異常關(guān)網(wǎng)絡(luò)端口拔插操作會觸發(fā)告警，運(yùn)維人員或IDC安保人員在5分鐘內(nèi)就會到場查看。

　　未經(jīng)用戶授權(quán)，騰訊云絕不主動觸碰用戶硬盤中數(shù)據(jù)。即便用戶授權(quán)，騰訊云也會通過權(quán)限劃分確保權(quán)限最小化，所有額外權(quán)限均需要經(jīng)過多級評審批準(zhǔn) ......