騰訊qq云盤再發(fā)聲明，盤復(fù)了前沿?cái)?shù)控文件系統(tǒng)元數(shù)據(jù)損壞的技術(shù)緣由，騰訊稱該毛病緣起于因磁盤靜默錯(cuò)誤招致的單副本數(shù)據(jù)錯(cuò)誤，再加上數(shù)據(jù)遷移過(guò)程中的兩次不標(biāo)準(zhǔn)的操作，招致云盤的三副本平安機(jī)制失效，并最終招致數(shù)據(jù)完好性受損，這種受損也是很費(fèi)事的，那么要怎樣處理這個(gè)難題呢？下面小編就來(lái)帶大家看看把！

騰訊qq云盤復(fù)數(shù)據(jù)損壞技術(shù)緣由 倡議開(kāi)快照功用圖一

關(guān)于客戶“前沿?cái)?shù)控”數(shù)據(jù)完好性受損的技術(shù)復(fù)盤：

近日，騰訊云客戶北京清博數(shù)控科技有限公司所屬“前沿?cái)?shù)控”平臺(tái)一塊操作系統(tǒng)云盤發(fā)作毛病，招致該客戶的文件系統(tǒng)元數(shù)據(jù)損壞，我們對(duì)客戶業(yè)務(wù)所受影響表示誠(chéng)摯歉意。同時(shí)，我們也對(duì)此次毛病過(guò)程停止了深化的技術(shù)復(fù)盤。

騰訊qq云盤復(fù)數(shù)據(jù)損壞技術(shù)緣由 倡議開(kāi)快照功用圖二

復(fù)盤發(fā)現(xiàn)，該毛病緣起于因磁盤靜默錯(cuò)誤招致的單副本數(shù)據(jù)錯(cuò)誤，再加上數(shù)據(jù)遷移過(guò)程中的兩次不標(biāo)準(zhǔn)的操作，招致云盤的三副本平安機(jī)制失效，并最終招致客戶數(shù)據(jù)完好性受損。

痛定思痛，騰訊云希望在盡力協(xié)助客戶處理本次問(wèn)題的同時(shí)，也經(jīng)過(guò)相關(guān)機(jī)制的優(yōu)化防止相似狀況的再度發(fā)作。

毛病過(guò)程復(fù)盤：

當(dāng)天上午11:57，我們的運(yùn)維人員收到倉(cāng)庫(kù)Ⅰ空間運(yùn)用率過(guò)高告警，準(zhǔn)備發(fā)起搬遷擴(kuò)容；在14:05時(shí)，運(yùn)維人員從倉(cāng)庫(kù)Ⅰ選擇了一批云盤搬遷至新倉(cāng)庫(kù)Ⅱ，為了加速搬遷，手動(dòng)關(guān)閉了遷移過(guò)程中的數(shù)據(jù)校驗(yàn)；在20:27搬遷完成之后，運(yùn)維人員將客戶的云盤訪問(wèn)切至倉(cāng)庫(kù)Ⅱ，同時(shí)為了釋放空間，對(duì)倉(cāng)庫(kù)Ⅰ中的源數(shù)據(jù)發(fā)起了回收操作；到20:30監(jiān)控發(fā)現(xiàn)倉(cāng)庫(kù)Ⅱ局部云盤呈現(xiàn)IO異常。

毛病緣由復(fù)盤：

本次事故來(lái)源自因磁盤靜默錯(cuò)誤招致的單副本數(shù)據(jù)錯(cuò)誤，再由于數(shù)據(jù)遷移過(guò)程中的不標(biāo)準(zhǔn)操作，招致異常數(shù)據(jù)擴(kuò)散至三副本，進(jìn)而招致客戶數(shù)據(jù)完好性受損。

數(shù)據(jù)搬遷過(guò)程中的違規(guī)操作主要如下兩點(diǎn)：

第一是正常數(shù)據(jù)搬遷流程默許開(kāi)啟數(shù)據(jù)校驗(yàn)，開(kāi)啟之后能夠有效發(fā)現(xiàn)并躲避源端數(shù)據(jù)異常，保證搬遷數(shù)據(jù)正確性，但是運(yùn)維人員為了加速完成搬遷任務(wù)，違規(guī)關(guān)閉了數(shù)據(jù)校驗(yàn)；

第二是正常數(shù)據(jù)搬遷完成之后，源倉(cāng)庫(kù)數(shù)據(jù)應(yīng)保存24小時(shí)，用于搬遷異常狀況下的數(shù)據(jù)恢復(fù)，但是運(yùn)維人員為了盡快降低倉(cāng)庫(kù)運(yùn)用率，違規(guī)對(duì)源倉(cāng)庫(kù)停止了數(shù)據(jù)回收。

因這些錯(cuò)誤操作的連續(xù)影響，招致該客戶數(shù)據(jù)完好性受損，給客戶的正常業(yè)務(wù)運(yùn)轉(zhuǎn)形成影響，騰訊云對(duì)此再次表示最誠(chéng)懇的歉意。

改良措施：

經(jīng)過(guò)技術(shù)復(fù)盤，騰訊云技術(shù)團(tuán)隊(duì)深化到每個(gè)環(huán)節(jié)，經(jīng)過(guò)義務(wù)到人與流程閉環(huán)的左右開(kāi)弓，相應(yīng)作出如下的增強(qiáng)和改良措施：

首先，我們將全面審視一切的數(shù)據(jù)流程，觸及數(shù)據(jù)平安的流程自動(dòng)化閉環(huán)，進(jìn)一步提升我們常規(guī)運(yùn)維自動(dòng)化和流程化，降低人工干預(yù)。同時(shí)把全流程的數(shù)據(jù)平安校驗(yàn)作為系統(tǒng)的常開(kāi)功用，不允許被關(guān)閉。

騰訊qq云盤復(fù)數(shù)據(jù)損壞技術(shù)緣由 倡議開(kāi)快照功用圖三

其次，針對(duì)物理硬盤靜默數(shù)據(jù)錯(cuò)誤，在當(dāng)前用戶訪問(wèn)途徑數(shù)據(jù)校驗(yàn)自愈的根底上，我們優(yōu)化現(xiàn)有巡檢機(jī)制，經(jīng)過(guò)優(yōu)先巡檢主副本數(shù)據(jù)塊、跳過(guò)近期用戶訪問(wèn)過(guò)的正確數(shù)據(jù)塊等辦法，加速發(fā)現(xiàn)該類錯(cuò)誤，停止數(shù)據(jù)修復(fù)。

進(jìn)一步倡議：

騰訊qq云盤自2016年3月以來(lái)不斷在提供免費(fèi)的快照功用，能夠?qū)χ匾獢?shù)據(jù)停止定期備份。同時(shí)出于對(duì)客戶數(shù)據(jù)隱私性和平安性的思索，客戶能夠自在選擇開(kāi)啟或者不開(kāi)啟這一免費(fèi)功用。騰訊云在這里也呼吁客戶開(kāi)啟這一功用，進(jìn)一步提升本身數(shù)據(jù)的平安性。