前言:AI、5G、IoT等技術(shù)的快速發(fā)展,帶來(lái)海量數(shù)據(jù)爆炸式增長(zhǎng)。IDC全球數(shù)據(jù)空間預(yù)測(cè)報(bào)告指出,2018年全球產(chǎn)生的數(shù)據(jù)量是32ZB,預(yù)計(jì)2023年將會(huì)增長(zhǎng)到103ZB*,這預(yù)示著我們即將進(jìn)入到萬(wàn)億字節(jié)數(shù)據(jù)的新時(shí)代。
數(shù)字經(jīng)濟(jì)時(shí)代,各行各業(yè)都在挖掘數(shù)據(jù)的應(yīng)用價(jià)值,數(shù)據(jù)是基礎(chǔ),而存儲(chǔ)是基石。數(shù)據(jù)的爆炸式增長(zhǎng)以及摩爾定律的即將失效,對(duì)現(xiàn)有存儲(chǔ)介質(zhì)和存儲(chǔ)架構(gòu)發(fā)出了全新的挑戰(zhàn)。作為全球數(shù)據(jù)技術(shù)的領(lǐng)導(dǎo)者,面對(duì)即將到來(lái)的ZB級(jí)數(shù)據(jù)時(shí)代,西部數(shù)據(jù)將如何應(yīng)對(duì),且看他們的思考和布局。
品牌整合 強(qiáng)化西部數(shù)據(jù)品牌影響力
從2009年開(kāi)始,為了不斷契合市場(chǎng)需求,持續(xù)完善存儲(chǔ)產(chǎn)品線,這十多年來(lái),西部數(shù)據(jù)一路下來(lái)完成了多啟收購(gòu)和兼并,形成了WD、HGST、閃迪(SanDisk)、G-Technology、tegile、upthere等多品牌林立的局面。
▲西部數(shù)據(jù)公司高級(jí)副總裁兼中國(guó)區(qū)總經(jīng)理Steven Craig
西部數(shù)據(jù)公司高級(jí)副總裁兼中國(guó)區(qū)總經(jīng)理Steven Craig敏銳的意識(shí)到,品牌眾多并不利于公司的產(chǎn)品定位和用戶選擇。過(guò)去一年里,在Steven Craig的帶領(lǐng)下,西部數(shù)據(jù)果斷的開(kāi)啟了對(duì)“一個(gè)西部數(shù)據(jù)Western Digital”品牌形象的調(diào)整和整合,將公司企業(yè)級(jí)、商務(wù)級(jí)存儲(chǔ)產(chǎn)品品牌包括HGST、tegile等統(tǒng)一規(guī)整到Western Digital這個(gè)品牌當(dāng)中,以便能夠更好的形成品牌合力,更聚焦的塑造西部數(shù)據(jù)Western Digital的品牌知名度和影響度。
不過(guò)在此次品牌整合過(guò)程中,Steven Craig也充分考慮到了市場(chǎng)對(duì)于西部數(shù)據(jù)部分子品牌的既有印象,對(duì)于在消費(fèi)級(jí)市場(chǎng)擁有強(qiáng)大品牌影響力的閃迪和WD兩個(gè)品牌進(jìn)行了保留,讓消費(fèi)市場(chǎng)可以延續(xù)這兩大品牌的市場(chǎng)影響力。
“對(duì)于以后的產(chǎn)品規(guī)劃和發(fā)布,我們希望通過(guò)品牌的整合能夠讓大眾對(duì)“一個(gè)西部數(shù)據(jù)”這樣的品牌形象有更深刻的理解。” Steven Craig表示。
此次品牌調(diào)整,除了對(duì)品牌進(jìn)行清晰定位的考慮之外,Steven Craig還談到另一個(gè)重要原因,他指出:“像西部數(shù)據(jù)這樣一個(gè)擁有近7萬(wàn)員工及近13800項(xiàng)專利的全球性的大型公司,我們還希望通過(guò)品牌的統(tǒng)一,能夠更好的促進(jìn)公司的人才、專利及市場(chǎng)渠道等各項(xiàng)資源的融合交流,集中力量對(duì)外輸出西部數(shù)據(jù)的產(chǎn)品和服務(wù),強(qiáng)化Western Digital的影響力和知名度。
作為一個(gè)業(yè)務(wù)線遍布全球的國(guó)際公司,同時(shí)又是領(lǐng)先的數(shù)據(jù)技術(shù)領(lǐng)導(dǎo)者,清晰的品牌定位以及獨(dú)具特色的產(chǎn)品組合無(wú)疑都可以幫助用戶更好的進(jìn)行選擇。為了強(qiáng)化品牌形象和產(chǎn)品特色,西部數(shù)據(jù)一貫的“顏色”策略如今已在行業(yè)市場(chǎng)被用戶廣泛認(rèn)可。
“通過(guò)不同的產(chǎn)品顏色來(lái)面向不同的行業(yè)市場(chǎng)進(jìn)行推廣是西部數(shù)據(jù)比較熱衷的策略,目前我們已經(jīng)成功推出了面向消費(fèi)市場(chǎng)的綠盤和藍(lán)盤,面向具有高性能需求的游戲領(lǐng)域的黑盤,面向NAS市場(chǎng)的紅盤,專為安防監(jiān)控市場(chǎng)打造的紫盤以及數(shù)據(jù)中心專用的金盤等一系列硬盤產(chǎn)品。顏色策略是一個(gè)非常有效的推廣模式,通過(guò)顏色的分類讓西部數(shù)據(jù)在相應(yīng)的市場(chǎng)上有更強(qiáng)的市場(chǎng)認(rèn)同度,更好的品牌知名度?!盨teven Craig補(bǔ)充道。
回顧過(guò)去一年,西部數(shù)據(jù)一方面大刀闊斧的進(jìn)行Western Digital的品牌整合,另一方面,面對(duì)全球數(shù)據(jù)的爆發(fā)式增長(zhǎng)對(duì)存儲(chǔ)產(chǎn)業(yè)所帶來(lái)的全新挑戰(zhàn),西部數(shù)據(jù)也在持續(xù)探索創(chuàng)新技術(shù)應(yīng)用和系統(tǒng)重構(gòu)的可能性,旨為大型數(shù)據(jù)中心提前布局萬(wàn)億字節(jié)時(shí)代的最優(yōu)數(shù)據(jù)存儲(chǔ)方案。
提前布局萬(wàn)億字節(jié)新時(shí)代
隨著5G、IoT、AI、超高清技術(shù)的發(fā)展,數(shù)據(jù)將產(chǎn)生爆炸性的增長(zhǎng)。據(jù)IDC全球數(shù)據(jù)空間預(yù)測(cè)報(bào)告指出,2018年全球產(chǎn)生的數(shù)據(jù)量是32ZB,預(yù)計(jì)2023年將會(huì)增長(zhǎng)到103ZB*【注解】,這意味著在我們即將進(jìn)入到一個(gè)階段性的ZB級(jí)數(shù)據(jù)時(shí)代。但I(xiàn)DC報(bào)告同時(shí)也指出,在2018年全球產(chǎn)生的32ZB數(shù)據(jù)量中只有5ZB的數(shù)據(jù)被保存下來(lái),占比不到16%,到2023年能夠被保存下來(lái)的數(shù)據(jù)預(yù)計(jì)將有12ZB,占比12%。
業(yè)界很多人將數(shù)據(jù)比作石油、黃金,數(shù)據(jù)的價(jià)值不言而喻,將海量數(shù)據(jù)保存下來(lái)是深挖數(shù)據(jù)應(yīng)用價(jià)值的前提。但現(xiàn)階段受觀念、成本、傳統(tǒng)存儲(chǔ)架構(gòu)等因素的限制,我們還無(wú)法將所有這些產(chǎn)生的數(shù)據(jù)存儲(chǔ)保留下來(lái)。
“我們希望能夠推出更多合適的產(chǎn)品來(lái)助力越來(lái)越多的數(shù)據(jù)存儲(chǔ)下來(lái),在各個(gè)數(shù)據(jù)鏈條的節(jié)點(diǎn)上面,更多的數(shù)據(jù)如果被存儲(chǔ)被分析,它就能夠帶來(lái)更大的數(shù)據(jù)價(jià)值和商業(yè)價(jià)值,也能夠?yàn)槿斯ぶ悄堋⒋髷?shù)據(jù)、機(jī)器學(xué)習(xí)的創(chuàng)新技術(shù)應(yīng)用奠定更廣泛的數(shù)據(jù)基礎(chǔ),通過(guò)技術(shù)的使能讓數(shù)據(jù)價(jià)值真正得以發(fā)揮并為產(chǎn)業(yè)賦能。”Steven Craig強(qiáng)調(diào)。
數(shù)據(jù)的指數(shù)級(jí)增長(zhǎng)直觀地驅(qū)動(dòng)著存儲(chǔ)設(shè)備朝著更高容量、更高密度以及更快讀寫速度的方向發(fā)展。重新審視當(dāng)下的存儲(chǔ)架構(gòu)、存儲(chǔ)介質(zhì)和存儲(chǔ)密度是否能夠滿足ZB級(jí)數(shù)據(jù)時(shí)代的發(fā)展需求,同時(shí)還要兼顧數(shù)據(jù)存儲(chǔ)的有效性和低成本,是時(shí)代交給西部數(shù)據(jù)的核心命題。
SMR突破物理極限瓶頸 刷新單盤面密度記錄
面對(duì)數(shù)據(jù)的高速增長(zhǎng),大容量存儲(chǔ)成為顯著需求,今年9月初,西部數(shù)據(jù)發(fā)布了兩款大容量產(chǎn)品18TB Ultrastar DC HC550 CMR HDD和20TB Ultrastar DC HC650 SMR HDD,其中18 TB的產(chǎn)品是傳統(tǒng)的CMR硬盤,而20 TB的產(chǎn)品特別采用了西部數(shù)據(jù)的SMR(shingled magnetic recording,疊瓦式磁記錄)技術(shù)。
SMR技術(shù)的推出和采用,為正逼近物理極限的傳統(tǒng)磁盤找到了新的突破口。和傳統(tǒng)磁盤相比,SMR盤通過(guò)疊瓦式寫入可以實(shí)現(xiàn)在相同的面積內(nèi)容納更多的磁道,從而提高了存儲(chǔ)面密度,據(jù)了解可以實(shí)現(xiàn)將近15-20%的數(shù)據(jù)容量的增加,這無(wú)疑極大程度的降低了磁盤單位 存儲(chǔ)容量的成本,對(duì)于大容量的目標(biāo)客戶而言可以帶來(lái)很大的成本優(yōu)勢(shì)。Steven Craig表示,預(yù)計(jì)到2023年,西部數(shù)據(jù)公司將在50%的HDD 硬盤上采用SMR技術(shù)支持,為大型數(shù)據(jù)中心用戶提供兼顧大容量和低成本的存儲(chǔ)產(chǎn)品和方案。
另外,在推進(jìn)SSD盤容量提升方面,基于快速增長(zhǎng)的存儲(chǔ)需求,西部數(shù)據(jù)2018年就已經(jīng)量產(chǎn)了96層3D NAND,預(yù)計(jì)2020年將進(jìn)入100層以上。Steven還表示相較于TLC更高容量的QLC(4Bit)也在快速增長(zhǎng),他預(yù)測(cè)QLC的增長(zhǎng)趨勢(shì)將會(huì)從2020年開(kāi)始比較顯著,到2023年QLC預(yù)計(jì)會(huì)達(dá)到超過(guò)50%的應(yīng)用占比范圍。為此,西部數(shù)據(jù)當(dāng)下正在致力于實(shí)現(xiàn)QLC邏輯擴(kuò)展的前沿技術(shù),通過(guò)橫向、縱向和邏輯三個(gè)維度在每一個(gè)垂直的存儲(chǔ)孔可以達(dá)到每單元422個(gè)比特,在保證性能的同時(shí),大幅降低了成本,提高了TCO效益,讓其能夠快速應(yīng)用到數(shù)據(jù)中心中。
除了爆炸式增長(zhǎng)的數(shù)據(jù)總量給存儲(chǔ)容量帶來(lái)了巨大的挑戰(zhàn)之外,未來(lái)數(shù)據(jù)分析、數(shù)據(jù)挖掘還需要更低延遲、更高性能的存儲(chǔ)架構(gòu)預(yù)以支撐。
ZNS分區(qū)存儲(chǔ)技術(shù) 重新定義ZB時(shí)代存儲(chǔ)架構(gòu)
“如今的通用存儲(chǔ)架構(gòu)效率低下,并且在面對(duì)越來(lái)越多的工作負(fù)載、應(yīng)用和數(shù)據(jù)集時(shí),可能會(huì)產(chǎn)生巨大的資源需求和成本開(kāi)銷,因此針對(duì)下一代數(shù)據(jù)發(fā)展,我們需要新的數(shù)據(jù)中心結(jié)構(gòu)。由于越來(lái)越多的數(shù)據(jù)具有順序?qū)懭氲奶匦?,例如視頻、物聯(lián)網(wǎng)/邊緣數(shù)據(jù)、監(jiān)控,以及可以分組或‘分區(qū)化’成更大數(shù)據(jù)塊(如大型人工智能/機(jī)器學(xué)習(xí)數(shù)據(jù)集)的數(shù)據(jù),這使我們可以加速推廣分區(qū)存儲(chǔ)設(shè)備,對(duì)工作負(fù)載進(jìn)行合理優(yōu)化,從而提高性能和效率,更早地實(shí)現(xiàn)總體擁有成本的降低?!? Steven Craig談到。
今年6月12日,西部數(shù)據(jù)公司在美國(guó)、中國(guó)同步發(fā)布了分區(qū)存儲(chǔ)技術(shù)。分區(qū)存儲(chǔ)架構(gòu)通過(guò)應(yīng)用層、主機(jī)和存儲(chǔ)協(xié)同數(shù)據(jù)存放位置,利用SMR HDD實(shí)現(xiàn)最的存儲(chǔ)容量,并通過(guò)新興分區(qū)命名空間(ZNS)標(biāo)準(zhǔn)的NVMe SDD實(shí)現(xiàn)耐久性和低延遲以及QoS性能,以彌補(bǔ)OP的限制問(wèn)題。
此前,我們知道,無(wú)論是SSD盤還是傳統(tǒng)HDD磁盤的迭代和演進(jìn)都是為了追逐更大容量的存儲(chǔ)以及每GB/$成本,當(dāng)下SMR HDD磁盤、QLC顆粒SSD盤被認(rèn)為是成本最低的產(chǎn)品,這也是創(chuàng)新科技推動(dòng)的結(jié)果。但是SMR、QLC也都面臨著寫入限制的問(wèn)題,比如SMR HDD在數(shù)據(jù)寫入時(shí),需要將疊瓦部分?jǐn)?shù)據(jù)遷移走,這就需要操作系統(tǒng)、以及應(yīng)用軟件的支持,而QLC的問(wèn)題在于PE(擦寫次數(shù))過(guò)低,為此,西部數(shù)據(jù)也做了很多努力,將QLC的PE提高到1000次,已經(jīng)能夠與TLC相當(dāng)。
硬件層面的技術(shù)突破是一方面,而此次西部數(shù)據(jù)針對(duì)分區(qū)存儲(chǔ)技術(shù)的推出也將從軟件層面解決SMR、QLC的寫入限制問(wèn)題,ZNS是NVMe標(biāo)準(zhǔn)規(guī)劃內(nèi)的新特性,也是對(duì)SMR技術(shù)的補(bǔ)充,它可以讓開(kāi)發(fā)人員在共同的軟件堆棧下不分存儲(chǔ)介質(zhì)類型有效的調(diào)用SMR和ZNS,賦予用戶端更大的靈活性。
據(jù)Steven Craig介紹,為了更方便用戶使用,推動(dòng)分區(qū)存儲(chǔ)技術(shù)的廣泛應(yīng)用,西部數(shù)據(jù)還采取了免費(fèi)開(kāi)源策略,開(kāi)發(fā)者、生態(tài)合作伙伴可以通過(guò)ZonedStorage.io 開(kāi)源網(wǎng)站,免費(fèi)獲取一些必要的軟件開(kāi)發(fā)庫(kù)、工具、ZNS信息、SMR資源和參考架構(gòu)等,該網(wǎng)站面向所用用戶進(jìn)行開(kāi)放,可以方便任何人來(lái)學(xué)習(xí)或者去推動(dòng)SMR、ZNS技術(shù)的應(yīng)用。
一定程度上,SMR和ZNS正在從根本上重塑云和企業(yè)數(shù)據(jù)中心,為用戶在未來(lái)能夠長(zhǎng)期節(jié)約總體擁有成本帶來(lái)了想象??梢哉f(shuō),由SMR和ZNS SSD組成的分區(qū)存儲(chǔ)架構(gòu)是實(shí)現(xiàn)優(yōu)化基礎(chǔ)架構(gòu)實(shí)現(xiàn)更大規(guī)模經(jīng)濟(jì)效益的面向未來(lái)的全新存儲(chǔ)架構(gòu),而隨著西部數(shù)據(jù)在中美兩地的大力推廣,2019年有望成為分區(qū)存儲(chǔ)技術(shù)元年。
共建從端到云數(shù)據(jù)鏈 賦能智能安防場(chǎng)景
“對(duì)于即將到來(lái)的萬(wàn)億字節(jié)數(shù)據(jù)時(shí)代,安防監(jiān)控產(chǎn)業(yè)所產(chǎn)生的海量視頻數(shù)據(jù)是其中非常重要的一部分?!?在Steven Craig看來(lái),安防是一個(gè)非常重要的數(shù)據(jù)增長(zhǎng)場(chǎng)景。
隨著智能安防監(jiān)控進(jìn)入到人工智能、物聯(lián)網(wǎng)時(shí)代,西部數(shù)據(jù)也在不斷針對(duì)智能安防監(jiān)控產(chǎn)業(yè)的應(yīng)用需求,持續(xù)不斷的優(yōu)化監(jiān)控級(jí)存儲(chǔ)產(chǎn)品,以能夠更好的契合行業(yè)用戶在他們的應(yīng)用場(chǎng)景里的整體使用需求。從最早期的單一的機(jī)械硬盤,到后來(lái)隨著西部數(shù)據(jù)公司本身的成長(zhǎng)壯大推動(dòng)著存儲(chǔ)產(chǎn)品線的持續(xù)完善,經(jīng)過(guò)多年的拓展和積累,目前西部數(shù)據(jù)在安防監(jiān)控市場(chǎng)已經(jīng)能夠以更復(fù)雜的方式和更多元化的角度跟行業(yè)領(lǐng)域的安防企業(yè)進(jìn)行合作。
“在這個(gè)過(guò)程中,我們不光可以提供從端到云的全數(shù)據(jù)鏈的存儲(chǔ)產(chǎn)品和服務(wù),同時(shí),我們也可以更深入的參與到智慧城市建設(shè)中來(lái),通過(guò)跟客戶以及生態(tài)系統(tǒng)的合作來(lái)共建從端到云的數(shù)據(jù)鏈條。從安防攝像頭生成數(shù)據(jù)的終端存儲(chǔ),到近邊緣端去匯集數(shù)據(jù),一直到云端進(jìn)行數(shù)據(jù)存儲(chǔ)和分析。這也意味著無(wú)論是從云到端還是從端到云,西部數(shù)據(jù)都可以從視頻數(shù)據(jù)存儲(chǔ)的角度去使能客戶的方案。” Steven Craig表示。
眾所周知,安防不同于其他行業(yè)領(lǐng)域,安防監(jiān)控視頻數(shù)據(jù)首先需要滿足7*24小時(shí)不間斷的采集,這對(duì)存儲(chǔ)設(shè)備的穩(wěn)定性和耐久性提出了基本要求;而隨著4K、8K超高清攝像頭的上陣,也進(jìn)一步加劇了大容量存儲(chǔ)的壓力;與此同時(shí),人臉識(shí)別、視頻內(nèi)容分析等技術(shù)的廣泛應(yīng)用,又給監(jiān)控存儲(chǔ)帶來(lái)了數(shù)據(jù)快速寫入讀取的高性能要求。這些無(wú)疑都對(duì)監(jiān)控級(jí)存儲(chǔ)產(chǎn)品的穩(wěn)定性、耐久性、整體性能以及使用成本都提出了很高的硬性要求。
對(duì)于產(chǎn)品質(zhì)量和品質(zhì)的把控,Steven Craig擁有豐富的經(jīng)驗(yàn),從業(yè)多年,Steven一直擔(dān)任著全球大型公司質(zhì)量管控或客戶體驗(yàn)事業(yè)部高級(jí)副總裁的職務(wù),這讓Steven對(duì)產(chǎn)品的品質(zhì)控制有著異常嚴(yán)苛和細(xì)致的標(biāo)準(zhǔn)。
因此,當(dāng)談及監(jiān)控級(jí)硬盤的性能設(shè)計(jì)的話題時(shí),Steven Craig直言:“品質(zhì)和性能不可割裂,當(dāng)我們想要在產(chǎn)品上實(shí)現(xiàn)一定性能的時(shí)候會(huì)更多的從品質(zhì)的角度考慮。所以西部數(shù)據(jù)在設(shè)計(jì)產(chǎn)品的過(guò)程中,非常注重產(chǎn)品的穩(wěn)定性,我們也因此會(huì)花很長(zhǎng)的周期去進(jìn)行相關(guān)的設(shè)計(jì),然后測(cè)試、驗(yàn)證,比如關(guān)注產(chǎn)品的連續(xù)轉(zhuǎn)速、隨機(jī)的讀寫性能等。”
在這個(gè)過(guò)程中,西部數(shù)據(jù)還會(huì)密切關(guān)注行業(yè)用戶的應(yīng)用需求,比如用戶對(duì)有七年產(chǎn)品周期,五年質(zhì)保這樣的硬性指標(biāo),然后嚴(yán)格的把控從產(chǎn)品設(shè)計(jì)、測(cè)試到驗(yàn)證的各個(gè)環(huán)節(jié),以保障產(chǎn)品的性能和質(zhì)量。如此繁瑣和細(xì)致,只為讓每一塊到達(dá)用戶手中的硬盤能夠經(jīng)得起各種使用環(huán)境的考驗(yàn)。
面對(duì)智能監(jiān)控領(lǐng)域中大數(shù)據(jù)和快速數(shù)據(jù)的應(yīng)用趨勢(shì),Steven Craig一直強(qiáng)調(diào)要和客戶及生態(tài)系統(tǒng)共建數(shù)據(jù)鏈,“我們很愿意和客戶達(dá)成深度合作,以便深入了解用戶對(duì)于數(shù)據(jù)存儲(chǔ)的實(shí)際需求。同時(shí)也會(huì)幫助我們的客戶去深入的了解他們的數(shù)據(jù)生成的過(guò)程,以及這些數(shù)據(jù)需要如何去架構(gòu),以怎樣的方式傳送給硬盤等等。在雙向溝通的過(guò)程中,我們和用戶雙方都能夠更好的了解我們的數(shù)據(jù)架構(gòu)以及相適配的存儲(chǔ)方案,也便于西部數(shù)據(jù)不斷提升和優(yōu)化我們的存儲(chǔ)產(chǎn)品,從容量、性能、TCO等多方面綜合考慮,推出更多能夠滿足客戶使用場(chǎng)景的最優(yōu)存儲(chǔ)方案?!? Steven Craig表示。
結(jié)語(yǔ)
對(duì)于即將到來(lái)的萬(wàn)億字節(jié)數(shù)據(jù)新時(shí)代,可以看出,西部數(shù)據(jù)已經(jīng)做足了準(zhǔn)備,集聚Western Digital的品牌力量,擬攜手產(chǎn)業(yè)合作伙伴共建良好數(shù)據(jù)生態(tài)系統(tǒng),一起推進(jìn)數(shù)據(jù)產(chǎn)業(yè)的發(fā)展繁榮,共同探索萬(wàn)億字節(jié)時(shí)代數(shù)據(jù)的潛力和價(jià)值。
*來(lái)源:IDC全球數(shù)據(jù)空間預(yù)測(cè),2019-2023:消費(fèi)者對(duì)企業(yè)擴(kuò)展的依賴性,2019年1月,DOC#US44615319
(本文源自a&s《安全&自動(dòng)化》CHINA版237期封面報(bào)道)