|
數(shù)據(jù)存儲領(lǐng)域,，發(fā)展至今，已經(jīng)沒有多少秘密可言,。作為更為細(xì)分領(lǐng)域的歸檔存儲,，雖然有一些公有云廠商相繼對外推出基于云平臺的歸檔存儲服務(wù)，也有一些企業(yè)級存儲廠商在靜靜地升級歸檔存儲軟件功能,，但相比洶涌澎湃的5G,、人工智能、大數(shù)據(jù)等新興發(fā)展領(lǐng)域而言,，數(shù)據(jù)生命周期管理這個行業(yè),，已經(jīng)是紅海了。 8月6日,，UCloud正式發(fā)布新一代歸檔存儲產(chǎn)品,，該產(chǎn)品采用UCloud全新自研存儲架構(gòu)，相較標(biāo)準(zhǔn)存儲降低近80%的存儲成本,，價格低至0.024元/GB/月,，與市場同類歸檔存儲產(chǎn)品相比降低近30%成本。要想在一片紅海上揚(yáng)帆遠(yuǎn)航,，想必以中立云定位的UCloud ,，對新一代歸檔存儲有著與眾不同的想法與戰(zhàn)略。 近日全球存儲觀察的阿明與UCloud優(yōu)刻得存儲平臺研發(fā)總監(jiān)吳斌煒進(jìn)行了深入的探討,。 以下為訪談實(shí)錄： 一 “ 降低成本,，沒有最低只有更低！” 問題一：到目前為止,，少有廠商在歸檔存儲這個領(lǐng)域推陳出新,，UCloud為什么會如此看重歸檔存儲這個領(lǐng)域呢？ 吳斌煒：2020年是5G元年,，2020年之后的數(shù)據(jù)增長量很大,，其中大部分是冷數(shù)據(jù),，對于容量性存儲的需求自然會越來越明顯,。據(jù)IDC的預(yù)測，全球年新增數(shù)據(jù)量到2025年將達(dá)175ZB,，真正能存儲下來的數(shù)據(jù)僅有15ZB左右,，流失率超過91%,。在目前企業(yè)數(shù)據(jù)的冰山模型里，80%的數(shù)據(jù)量來源于冷數(shù)據(jù),。 可見,，這部分海量的冷數(shù)據(jù)，有著非常大的數(shù)據(jù)存儲市場潛力可挖,。然而,，數(shù)據(jù)存儲領(lǐng)域普遍的追求在于低成本和高性能。對于冷數(shù)據(jù)存儲而言,，核心自然在成本降低上,，降低成本沒有最低只有更低。 經(jīng)過長期的行業(yè)調(diào)查和技術(shù)研發(fā)積累,，UCloud認(rèn)為在冷數(shù)據(jù)存儲領(lǐng)域,，容量型存儲的發(fā)展空間還很大。雖然在公有云領(lǐng)域中,，已有多個友商早已推出了歸檔存儲產(chǎn)品服務(wù),，但在技術(shù)層面上還可以實(shí)現(xiàn)更低的成本，比如借助SMR磁盤技術(shù),，帶給用戶在冷數(shù)據(jù)存儲方面更好的價值回報,。 為此，UCloud新一代歸檔存儲在國內(nèi)首次采用了西部數(shù)據(jù)的高密JBOD機(jī)型和SMR盤,。SMR盤全名為疊瓦式磁記錄硬盤,，相較于傳統(tǒng)CMR硬盤，SMR疊瓦式磁記錄硬盤最大的特長在于,，磁道按Zone呈現(xiàn)疊瓦式分布,，實(shí)現(xiàn)更高密度的數(shù)據(jù)存儲。 與36盤位傳統(tǒng)機(jī)型相比,，采用高密機(jī)型SMR盤后,，單位機(jī)架的存儲容量提升5.375倍，硬盤數(shù)量增加59%,，單塊硬盤存儲空間提升150%,。 十分顯然，UCloud新一代歸檔存儲產(chǎn)品,，為降低大量“冷數(shù)據(jù)”的存儲成本而生,。與此同時，UCloud對象存儲還可以幫助企業(yè)將數(shù)據(jù)自動化分層存儲,，這樣更利于用戶對于冷數(shù)據(jù)存儲的成本管理,，也為UCloud在數(shù)據(jù)生命周期管理這片紅海上帶來了新機(jī)會。 二 “ 技術(shù)優(yōu)化成本，我們是認(rèn)真的,！” 問題二：數(shù)據(jù)歸檔對于用戶來說,，首要考慮是成本。UCloud新一代歸檔存儲在成本上,，必然有著自己不同于其他云廠商歸檔產(chǎn)品的成本優(yōu)勢,，主要從哪些方面，通過技術(shù)來優(yōu)化歸檔存儲成本,？ 吳斌煒：UCloud這些年的發(fā)展,，對用戶需求特別看重，正因?yàn)槿绱?，才可以順?yīng)用戶的導(dǎo)向贏得在中國公有云領(lǐng)域應(yīng)有的席位,。 我們認(rèn)為，用戶歸檔存儲成本的考量,，需要從CAPEX(Capital Expenditure)資本性支出和OPEX(Operating Expense)運(yùn)營成本兩個方面來全面考慮,。 在針對CAPEX的存儲硬件成本方面，主要包括計算,、存儲相關(guān)資源,。歸檔存儲的主要功能聚焦存儲，其計算資源消耗相對來說比較少,，盡可能將計算資源的成本占比降低,。就此，UCloud新一代歸檔存儲采用目前單U密度超高的盤柜技術(shù),，實(shí)現(xiàn)4U機(jī)柜102盤位的高密度部署,，同時采用的單盤存儲容量盡可能大，而SMR技術(shù)也帶來了單盤容量的高密度,。從機(jī)柜設(shè)計的JBOD機(jī)型高密度到采用SMR單盤的高密度,，加大存儲密度降低單位成本，處處為突破成本極限而努力,。 在針對OPEX的運(yùn)營成本方面,，包括機(jī)位成本和運(yùn)營產(chǎn)生的電費(fèi)成本、折舊和帶寬,。折舊和帶寬基本是用戶固定的消費(fèi),，因此重點(diǎn)在前兩者的成本優(yōu)化。 其一,，降低機(jī)位成本,，存儲密度提高可以帶來直接效果。 其二,，降低電費(fèi)成本,，采用了UCloud自研的上下電IO調(diào)度系統(tǒng)，極大降低電費(fèi)成本開支，同時保障磁盤的壽命,。 歸檔存儲絕大多數(shù)場景以寫為主,，寫完數(shù)據(jù)的磁盤根據(jù)我們的調(diào)度算法在合適的時機(jī)會進(jìn)行下電spindown操作,，在客戶讀請求來的時候也根據(jù)調(diào)度算法在合適的時機(jī)spinup進(jìn)行上電操作,，這樣可以使得硬盤能耗降低近90%， 在純寫入場景下,，耗能磁盤塊數(shù)為原有的5%,。 此外，還有三個技術(shù)細(xì)節(jié)對優(yōu)化成本非常有利,。 EC糾刪碼技術(shù)靈活配置,，加大冗余，提高數(shù)據(jù)存儲可靠性,，這相對多副本技術(shù)來說,，降低更多多副本帶來的存儲成本。 UCloud新一代歸檔存儲直接管理裸盤,，不經(jīng)過文件系統(tǒng),，減少開銷，沿襲了UCloud在數(shù)據(jù)存儲領(lǐng)域的一貫思路,。并且UCloud很早就積累了自研文件系統(tǒng)經(jīng)驗(yàn)和對裸盤塊設(shè)備直接操作的經(jīng)驗(yàn),，不通過通用文件系統(tǒng)來操作SMR盤。在歸檔存儲的場景下,，絕大多數(shù)是順序?qū)懼笊倭康碾S機(jī)讀,，這時候SMR盤在大容量方面的優(yōu)勢就可以發(fā)揮的淋漓盡致。 三 “ 降本增效,，更需兼顧可靠性與可用性,！” 問題三：除了成本之外，UCloud新一代歸檔存儲最大的競爭力表現(xiàn)在哪里呢,？ 吳斌煒：降本增效既然已經(jīng)成為歸檔存儲的一個關(guān)鍵詞,，那么更需要在兼顧可靠性與可用性的基礎(chǔ)上來實(shí)現(xiàn)。對于用戶來說,，不考慮可靠性與可用性的一味降低成本,，預(yù)示著高風(fēng)險的存在，并非競爭力的真正體現(xiàn),。 在可靠性方面,，UCloud新一代歸檔存儲實(shí)現(xiàn)了存儲節(jié)點(diǎn)雙機(jī)頭可見，在發(fā)生故障時,，可以快速自動切換,。通過采用大比例可靈活配置的EC糾刪碼技術(shù)，提高存儲利用率150%。同時通過硬件加速,，使EC計算相較于傳統(tǒng)的純軟件計算,，提升了4~5倍吞吐能力。新一代歸檔存儲還實(shí)現(xiàn)了全鏈路的CRC校驗(yàn),，防止靜默錯誤,，元數(shù)據(jù)冗余，定期Scrub,，通過數(shù)據(jù)一致性檢查來全面保障用戶數(shù)據(jù)的安全性,。 一般情況下，通過對用戶需求的分析來看,，歸檔存儲都以寫數(shù)據(jù)為主,，讀數(shù)據(jù)的情況比較少， UCloud在確保數(shù)據(jù)可靠性和服務(wù)可用性基礎(chǔ)上,，將成本優(yōu)勢發(fā)揮到極致,。 一方面，保證99.9%以上可用性的冗余策略,，以及與標(biāo)準(zhǔn)存儲相同的99.999999999%數(shù)據(jù)持久性,。 另一方面，相較標(biāo)準(zhǔn)存儲降低近80%的存儲成本,，每月每GB成本降低到了0.024元,，突破現(xiàn)有云上歸檔存儲的價格極限。 四 “ 歸檔數(shù)據(jù)恢復(fù),，實(shí)現(xiàn)分鐘級激活,！” 問題四：歸檔存儲雖然針對歸檔數(shù)據(jù)，但是歸檔數(shù)據(jù)也需要恢復(fù),。在數(shù)據(jù)恢復(fù)方面,，UCloud新一代歸檔存儲實(shí)現(xiàn)的能力怎么樣？ 吳斌煒：事實(shí)上,，任何一個用戶做了歸檔存儲,，總會有需要讀數(shù)據(jù)的時候，那就必然需要實(shí)現(xiàn)成功恢復(fù)數(shù)據(jù)并讀取,。我們在滿足歸檔存儲常規(guī)場景下的小時級別數(shù)據(jù)恢復(fù)外,，也提供客戶分鐘級別的緊急讀取能力。 UCloud新一代歸檔存儲關(guān)于數(shù)據(jù)恢復(fù)的處理邏輯是,，將冷數(shù)據(jù)提取到熱數(shù)據(jù)層,，然后用戶從熱數(shù)據(jù)層讀取。這里主要包含了兩件事情,，一是通過激活數(shù)據(jù)到歸檔存儲上層的熱存儲里面,，二是在激活之后進(jìn)行數(shù)據(jù)的讀取,。 UCloud新一代歸檔存儲采用的是高密度機(jī)型，決定數(shù)據(jù)恢復(fù)的速度主要來自磁盤個數(shù)和帶寬大小,，理論上來說UCloud可以實(shí)現(xiàn)最高50G帶寬的速度來激活其中某一個文件,。一旦數(shù)據(jù)達(dá)到熱存儲層的標(biāo)準(zhǔn)存儲后，讀取數(shù)據(jù)的速度就更快,。 假設(shè)針對一個20G大小的文件,，可以在分鐘級范圍內(nèi)實(shí)現(xiàn)數(shù)據(jù)的讀取。云存儲的訪問速度來自帶寬大小的影響很明顯,，帶寬大小一般因人而異,，主要在于用戶的帶寬選擇 五 “ 歸檔也需安全,，別忘了安全分級管理,！” 問題五：針對數(shù)據(jù)安全方面特別是加密和權(quán)限管理上，UCloud新一代歸檔存儲如何來更好地實(shí)現(xiàn),？ 吳斌煒：對于數(shù)據(jù)安全的理解需要綜合來看,，防止數(shù)據(jù)泄露，一是來自外部的風(fēng)險,。外部用戶非法訪問或?qū)懭霐?shù)據(jù),，需要通過權(quán)限管理模式，設(shè)置歸檔存儲用戶名和密碼,，且密碼有一定的時效性,。 同時，針對用戶名密碼可能出現(xiàn)的泄露,，通過IP白名單來管控,；還要配套設(shè)置用戶名密碼時效期，避免和降低泄露風(fēng)險,。此外,，設(shè)置訪問日志記錄的管理功能，通過日志審核非法訪問進(jìn)行管理,。 二是,，用戶內(nèi)容的權(quán)限管理。避免內(nèi)部用戶惡意刪除等操作,，UCloud新一代歸檔存儲有一個管理平臺,，將使用云存儲資源的使用者和管理者實(shí)現(xiàn)區(qū)分，管理者創(chuàng)建員工使用權(quán)限,。針對管理者可能潛在的風(fēng)險,，有一個多版本技術(shù)，管理者刪除不了歷史版本,，即使遭遇了刪除風(fēng)險,，也可以通過多版本的歷史版本進(jìn)行數(shù)據(jù)恢復(fù),。 三是，避免云公司內(nèi)部員工泄露數(shù)據(jù),。UCloud新一代歸檔存儲通過公司內(nèi)部權(quán)限管理,，配合加密方式來避免風(fēng)險，用戶在客戶端可以實(shí)現(xiàn)加密,，并將密鑰提供給服務(wù)端加密,。當(dāng)前普遍采取的是客戶端加密的方式，用戶能夠自己保障數(shù)據(jù)的安全性,，也較容易實(shí)現(xiàn)和操作,。 六 “ 再也不怕天災(zāi)不可抗力的破壞了！” 問題六：對于不可抗因素如地震,、水災(zāi)等突發(fā)事件,，UCloud新一代歸檔存儲如何通過策略性優(yōu)化，來保障用戶冷數(shù)據(jù)的安全,？ 吳斌煒：針對各種極端風(fēng)險情況,，UCloud新一代歸檔存儲提供了跨地域的復(fù)制存儲功能。一旦某個用戶數(shù)據(jù)可靠性要求很高,，存放時間要求比較長,，那么就可以采用這個復(fù)制功能，將數(shù)據(jù)通過專線,，跨地域異步復(fù)制到另外一個地域甚至多個地域去存儲數(shù)據(jù),。這樣提升數(shù)據(jù)的可靠性，避免單個地域存儲,，出現(xiàn)極端情況下的數(shù)據(jù)丟失,。 七 “ 鎖定目標(biāo)，助力用戶積累數(shù)據(jù)財富,！” 問題七：目前來看,，哪個或哪幾個具體的場景是UCloud新一代歸檔存儲最先需要拓展的方面？ 吳斌煒：當(dāng)前來看,，UCloud新一代歸檔存儲可以覆蓋三大類數(shù)據(jù)歸檔存儲需求,，即多媒體數(shù)據(jù)歸檔、歷史數(shù)據(jù)合規(guī)存儲,，以及大數(shù)據(jù),、AI分析數(shù)據(jù)歸檔。 歸檔存儲應(yīng)用場景還是比較廣泛,，不過UCloud新一代歸檔存儲重?fù)?dān)鎖定在幾個領(lǐng)域,。 一是互聯(lián)網(wǎng)領(lǐng)域。在線直播,、視頻監(jiān)控目前已逐漸普及,，在這些場景中,，一個1080P的高清視頻存儲一天就需要45G的容量，一個視頻網(wǎng)站每天產(chǎn)生的數(shù)據(jù)量可達(dá)TB以上,。UCloud新一代歸檔存儲結(jié)合對象存儲在不同存儲類型間的生命周期轉(zhuǎn)換功能,，可以快速實(shí)現(xiàn)數(shù)據(jù)由熱至溫再到冷的存儲類型轉(zhuǎn)換，完成自動化的數(shù)據(jù)生命周期管理,。 二是大數(shù)據(jù)領(lǐng)域,。像自動駕駛、AI分析等場景產(chǎn)生大量數(shù)據(jù),，通過UCloud新一代歸檔存儲整體解決方案的實(shí)施,，這些場景的實(shí)時分析數(shù)據(jù)得以長期歸檔存儲，為未來的產(chǎn)品研發(fā)儲備研究資料,。 三是傳統(tǒng)企業(yè)領(lǐng)域,。傳統(tǒng)企業(yè)包括醫(yī)療、基因工程等領(lǐng)域,，有著數(shù)據(jù)歸檔的明確政策需求,。就腫瘤疾病的基因測序?yàn)槔?，單個患者的DNA樣本數(shù)據(jù)能達(dá)到560GB,，如果按照每年1800多萬的癌癥病例來計算，使用基因分析技術(shù)后每年就會產(chǎn)生10PB的腫瘤基因樣本數(shù)據(jù),。而中國一家三甲醫(yī)院每年的影像數(shù)據(jù)就有20TB左右,，全國3萬多家醫(yī)院的數(shù)據(jù)量，也是非常龐大的數(shù)據(jù),。UCloud新一代歸檔存儲能夠?yàn)榇罅康纳镄畔?shù)據(jù),，以更低的價格、更可靠的方式,，提供長期存儲,。 四是，針對數(shù)據(jù)的保存率來看,，很多用戶不是沒有產(chǎn)生數(shù)據(jù),，而是沒有很好地保存下來而已，一旦未來某個時候需要這個數(shù)據(jù),，也就無從查找,。同時，業(yè)內(nèi)每年都會發(fā)生一些安全性的數(shù)據(jù)事件,，這些也適用于歸檔存儲產(chǎn)品對數(shù)據(jù)進(jìn)行長期保存,。 此外，隨著新基建的深入發(fā)展,，新技術(shù)與新場景不斷融合,，促進(jìn)了在線教育,、云游戲、自動駕駛,、智慧社區(qū),、智能制造等新興行業(yè)，將產(chǎn)生越來越多的海量數(shù)據(jù),。數(shù)據(jù)歸檔必然可以為未來挖掘數(shù)據(jù)生產(chǎn)要素的價值而積累數(shù)據(jù)財富,。 八 “ 新入口新機(jī)會，面向未來潛力無限,！” 問題八：新一代歸檔存儲對于UCloud的整體業(yè)務(wù)貢獻(xiàn)來看,，在你看來可以帶來怎樣的有利的影響？ 吳斌煒：UCloud的發(fā)展初衷就是希望通過技術(shù)與產(chǎn)品創(chuàng)新,，給行業(yè)帶來不斷變化,，給用戶帶來更多價值。 科技發(fā)展帶來了巨大的機(jī)遇,，來自5G,、物聯(lián)網(wǎng)、大數(shù)據(jù),、人工智能等新興技術(shù)多元驅(qū)動,，讓數(shù)據(jù)變成了用戶的重要資產(chǎn)。因此,，針對海量冷數(shù)據(jù)的存儲需求,，UCloud發(fā)展新一代歸檔存儲，配合對象存儲,、文件存儲,、數(shù)據(jù)方舟、新一代云盤等豐富的存儲服務(wù),，幫助用戶避免數(shù)據(jù)流失和數(shù)據(jù)管理混亂,，把數(shù)據(jù)冰山改造成數(shù)據(jù)金山。 小結(jié)：期待“冷數(shù)據(jù)”的更多熱思考 歷經(jīng)八問,，通過與UCloud專家的交流,，讓全球存儲觀察的阿明對UCloud新一代歸檔存儲在“紅海”揚(yáng)帆起航有了更深刻的認(rèn)識,，當(dāng)然,，歸檔存儲好不好，不能只考慮價格成本的單一性,，對于用戶來說需要考慮生命周期管理的全過程,，增加數(shù)據(jù)資產(chǎn)的利用效率。 聽君一席話,，勝看十年網(wǎng),。 隨著新一代歸檔存儲的發(fā)布,，UCloud必將引發(fā)一場新的云存儲格局變化，讓我們更好地樂對ZB級的數(shù)字化新時代,，期待“冷數(shù)據(jù)”的更多熱思考,。 （by Aming） - END- 你 怎 么 看 ？ 歡迎文章末尾留言評論,！ 文章來源：Aming,，全球存儲觀察，著作權(quán)歸作者所有,。商業(yè)轉(zhuǎn)載請聯(lián)系作者獲得授權(quán),，非商業(yè)轉(zhuǎn)載請注明出處。本文和作者回復(fù)僅代表個人觀點(diǎn),，不構(gòu)成任何投資建議,。 都看到這里了，加個關(guān)注吧,！ 【阿明】：科技評論專欄作者,、科技媒體從業(yè)22年、新聞評論年產(chǎn)出上百萬字,，用數(shù)據(jù)說話,，帶你看懂科技上市公司。 |
|
|
