駛向智能海洋深處,華為存儲的無盡想象

1519年9月20日,葡萄牙航海家麥哲倫率領探險隊經(jīng)直布羅陀海峽,開始環(huán)球航行。

一年多以后,他們穿越了一個狂風巨浪、險灘暗礁的海峽,來到了一片茫茫無際的大洋。在其中航行了三個月,從南美洲越過關島,抵達菲律賓群島,始終沒有遇到一次大的風浪。這群世界上第一批全球航行的隊員,將這片安全的海域稱之為“太平洋”。

可以說,太平洋具備了海洋最高級的一切特征——深邃、寬廣、巨大。在科技的語境中,它和今天新基建環(huán)境下的數(shù)據(jù)洪流如出一轍。

既然海洋并不是在任何時候都平靜美麗,地震、海嘯、臺風……自然之力曾無數(shù)次向人類宣示它的瘋狂。那么,憑什么我們會認為海量數(shù)據(jù)的暴漲也會乖乖被人類所蟄伏呢?

云計算、大數(shù)據(jù)、人工智能等新一代信息技術的產(chǎn)業(yè)化,讓數(shù)據(jù)以前所未有的爆炸式增長,奔涌到各行各業(yè)面前,需要更強大的基礎設施來應對海量數(shù)據(jù)。

(華為重磅發(fā)布OceanStor存儲Pacific系列)

最近,華為發(fā)布的OceanStor存儲 Pacific系列,就針對最壯闊、也最險峻的海量數(shù)據(jù)場景,揚起了迎擊驚濤的風帆。這意味著,數(shù)據(jù)存儲不再是一件“看天吃飯”的事,正在被人力一點一滴地擺渡至彼岸。

靜謐中醞釀驚濤:存儲海量數(shù)據(jù)的產(chǎn)業(yè)暗涌

如果我們用誠實而謙遜的視角來審視即將到來的智能時代,會發(fā)現(xiàn)海量數(shù)據(jù)正如同季風一樣,既帶來了充沛的智能雨水,也埋藏著不穩(wěn)定的因素。

簡單總結一下的話,存儲海量智能數(shù)據(jù)的海域中,可能導致哪些自然災害:

首先,暴漲的洪流。5G、AI、IoT等的廣泛應用,讓現(xiàn)在各行各業(yè)對數(shù)據(jù)存儲的量級需求越來越大,數(shù)據(jù)如海浪般席卷而來,不僅讓機房和數(shù)據(jù)中心的存儲成本日漸上升,而且在傳統(tǒng)的服務器支撐下,已經(jīng)出現(xiàn)了部分硬性數(shù)據(jù)存儲不下的現(xiàn)實問題。

比如1小時8K超高清視頻占用的存儲空間,是1080P高清視頻的40倍以上;5G讓工業(yè)互聯(lián)、遠程診療、自動駕駛成真的同時,也給運營商帶來了10倍以上數(shù)據(jù)增長壓力;基因測序的商業(yè)化普及,日產(chǎn)出的數(shù)據(jù)高達6TB。

如果這些數(shù)據(jù)都無法被存儲,或是迫于空間成本有限而限期刪除,那么對其的挖掘、訓練、利用自然也成了無水之源、無本之末。而調(diào)查顯示,由于傳統(tǒng)存儲系統(tǒng)架構與成本的限制,當前企業(yè)數(shù)據(jù)僅有不到2%被保存。

如何將爆發(fā)式增長的數(shù)據(jù)以高性價比儲存、妥帖挖掘,就成了存儲行業(yè)的新任務。

其次,異構的暗礁。

智能時代的多場景復雜部署,數(shù)據(jù)庫面臨的分布式架構挑戰(zhàn),數(shù)據(jù)的異構性正在沖擊存儲的極限。

有的數(shù)據(jù)被儲存在不同結構的計算硬件中,大型機、小型機、工作站、PC、手機、傳感器等等,一切皆有可能。數(shù)據(jù)的格式也在增多,從傳統(tǒng)的數(shù)據(jù)庫、二維數(shù)據(jù),逐漸擴展到語音、圖像、視頻等等新型多結構數(shù)據(jù),還可能被分別存儲在世界各地的不同地點……調(diào)查顯示,到2025年180ZB規(guī)模的數(shù)據(jù)中,有95%是非結構化的數(shù)據(jù),它們以分散的、不完整、不規(guī)則的形式,被接入到數(shù)據(jù)平臺中。

比如智慧城市的建設過程中,就既有來自登記信息、地理信息系統(tǒng)這樣的結構化數(shù)據(jù),也有傳感器檢測這樣來源多樣的數(shù)據(jù),以及行為描述等難以被記錄的數(shù)據(jù)。想要對異構數(shù)據(jù)進行交換和共享,也對當下互聯(lián)網(wǎng)存儲系統(tǒng)提出了新的挑戰(zhàn)。

最后,產(chǎn)業(yè)板塊的地震帶。

太平洋是離我們最親近的海洋,而環(huán)抱著它的板塊擠壓地帶,也成為地球上最不穩(wěn)定的部分。圍繞千行萬業(yè)的基座——數(shù)據(jù)存儲,在托舉起產(chǎn)業(yè)智能的時候,也可能引發(fā)行業(yè)的地震。

一方面,數(shù)據(jù)的暴漲帶來存儲瓶頸,會直接引發(fā)全社會對數(shù)據(jù)空間的爭奪,存儲成本的上漲與數(shù)字化不可逆轉的潮流相摩擦,將使不少行業(yè)面臨困局;

另外,數(shù)據(jù)存儲的本質(zhì)意義是為了更高效地處理、分析、利用,所以數(shù)據(jù)存儲行業(yè)不僅要將局部分散的數(shù)據(jù)建立起全局、統(tǒng)一的邏輯能力,解決數(shù)據(jù)的分片機制;還要讓數(shù)據(jù)管理使能社會經(jīng)營業(yè)務流程,打破不同存儲協(xié)議之間的孤島,讓海量數(shù)據(jù)得以在整個計算海域內(nèi)自由可靠地奔涌、流轉、共享,轉化成新的產(chǎn)業(yè)競爭力。

如果說,麥哲倫一行憑借幸運,恰好遇上了這片海域最風平浪靜的時刻,那么產(chǎn)業(yè)數(shù)字化的席卷,可能需要多一點審慎的思考,思考如何征服數(shù)據(jù)存儲這片疆域,讓萬物智能驅動風帆駛向更遠處。

鍛造存儲巨輪:華為OceanStor存儲Pacific系列的渡海之旅

既然作為數(shù)字海洋基座的數(shù)據(jù),驅動著智能技術使能全社會的轉型升級。深耕智能基建的華為,自然不會缺席。

華為最新一代OceanStor存儲Pacific系列,就是幫助產(chǎn)業(yè)者安全橫渡數(shù)據(jù)海洋所打造的一艘現(xiàn)代化巨輪。在三個核心部件,鍛造出了全新的價值想象:

一是技術的桅桿。

數(shù)據(jù)的多源異構、應用場景的廣泛覆蓋、跨硬件的架構難題,是產(chǎn)業(yè)應用數(shù)據(jù)、冶煉智能、賦能業(yè)務的核心阻礙。所以在華為 OceanStor存儲Pacific系列中,華為就用前沿的技術矩陣打造了一個創(chuàng)新的桅桿,成為數(shù)字航海強有力的支撐。

首先,華為OceanStor存儲此次推出的全新一代Pacific系列,就針對海量數(shù)據(jù)場景,打造了專用硬件高密大容量存儲,可以在5U空間里支持120塊硬盤,密度達到業(yè)界通用存儲型服務器的2.67倍,空間節(jié)省62.5%;

除了硬件之外,華為還結合多協(xié)議融合互通、高效縮減算法、多級可靠機制等軟件創(chuàng)新,將硬件的能力充分調(diào)動起來,提供了傳統(tǒng)服務器所無法承載的能力。比如依托系列化硬件,以分布式超容量擴展為主體,結合下一代彈性EC算法、多協(xié)議無損互通等,可以讓存儲資源在面對AI、HPC、視頻等不同高并發(fā)數(shù)據(jù)數(shù)據(jù)時,提供更可靠的解決方案。與業(yè)界開源系相比,可以達到93%的有效利用率。

軟硬件的協(xié)同作用,讓華為OceanStor存儲Pacific系列的桅桿,既堅固可靠,又柔韌有彈性,同時滿足海量存儲與不同場景部署的訴求,也成為業(yè)界技術變革的風向標。

二是高效的發(fā)動機。

數(shù)據(jù)存儲就如同航母的發(fā)動機,怕它不動,又怕它亂動。既不能停擺,又需要足夠的能效來保障船只行駛的更遠,因此,華為率先推出可得容量的商業(yè)模式,基于領先的數(shù)據(jù)冗余保護和縮減技術,幫助用戶降低海量存儲的采購和使用門檻。

在性能和可靠性不降低的前提下,內(nèi)部vNode技術可讓磁盤利用率達到93%,相比業(yè)界平均水平領先40%以上。熱、溫、冷數(shù)據(jù)按需自動分級到閃存、磁盤和藍光介質(zhì),數(shù)據(jù)自由流動無需人工干預,進一步降低運維成本。

而通過業(yè)界首個文件、大數(shù)據(jù)、對象協(xié)議無損互通,華為OceanStor存儲Pacific系列解決了傳統(tǒng)網(wǎng)關方式的性能和語義損失問題,讓一套存儲可以支撐多個業(yè)務環(huán)節(jié)的數(shù)據(jù)處理,直接幫助客戶節(jié)省空間。

這些效率效能上的加持,打破了數(shù)據(jù)存儲的服務邊界,讓更多行業(yè)可以大膽擁抱數(shù)據(jù)基礎設施,向智能時代全速前進。

三是產(chǎn)業(yè)的船錨。

正如前面所說,華為OceanStor存儲Pacific系列的誕生,是華為智能計算戰(zhàn)略布局下,海量數(shù)據(jù)存儲與產(chǎn)業(yè)數(shù)字化之間的重要通道。因此,與行業(yè)場景聯(lián)動的能力也就至關重要。

目前看來,華為OceanStor存儲Pacific系列產(chǎn)品并不局限于當一個沒有感情的數(shù)據(jù)容器,而是通過眾多技術手段來幫助企業(yè)釋放數(shù)據(jù)價值,反哺數(shù)字化轉型。

比如推出的數(shù)據(jù)管理系統(tǒng)DMS,就打破了華為存儲系統(tǒng)和第三方架構的藩籬,將幾種協(xié)議數(shù)據(jù)面融合互通,讓企業(yè)數(shù)據(jù)的平臺化應用更簡單,擺脫數(shù)據(jù)孤島的困境。整體架構的設計也不斷不斷進行調(diào)優(yōu)和變化,部分分布式場景還支持虛擬化和云平臺的場景應用……

通過這些手段,充分滿足海量數(shù)據(jù)場景不同的存儲需求,簡化數(shù)據(jù)應用的門檻,把數(shù)據(jù)的利用價值提升到最大限度。

因此,存儲得以由單一硬件向數(shù)據(jù)產(chǎn)業(yè)進化,融入到整個新基建浪潮的時代洪流機遇之中。

萬物智能的海洋深處,華為存儲的無盡想象

華為OceanStor存儲Pacific系列的推出,除了推動社會數(shù)字化大航海,也帶動了存儲市場自身進入了升級序列。這也引發(fā)了我們的好奇,華為存儲是如何在數(shù)年間,突破層層技術難關與產(chǎn)業(yè)高地,走到引領行業(yè)蝶變,實現(xiàn)價值自證的極限?

太平洋上,曾經(jīng)爆發(fā)過不少知名的戰(zhàn)爭。而華為在數(shù)據(jù)存儲市場的航海,背后的戰(zhàn)略部署在無形中也與海域作戰(zhàn)不謀而合?;蛟S我們可以從三場戰(zhàn)役,來理解華為深入存儲賽道的核心戰(zhàn)力。

第一戰(zhàn):車輪行動。

在一場針對洛斯內(nèi)格羅斯島的空襲戰(zhàn)斗中,面對敵人占據(jù)優(yōu)勢的戰(zhàn)況,麥克阿瑟選擇了開啟一場“賭博”,要求偵察部隊“迅速打擊,出奇制勝”。也就是著名的車輪行動,即如果沒有不必要的傷亡,就繼續(xù)前進,占領附近的機場,并迅速予以增援。經(jīng)過一周的戰(zhàn)斗,最終憑借車輪行動徹底贏得了戰(zhàn)斗。

這與華為整個存儲產(chǎn)品的成長史異曲同工??梢哉f華為存儲的發(fā)展進程,就是不斷攻占存儲的技術高地,幫助客戶解決問題,進而實現(xiàn)自我價值。

比如2014年,華為率先提出了融合存儲的概念,把存儲、備份等五個大點進行融合,引發(fā)了市場跟風效應。也是在此時,華為存儲一躍成為國內(nèi)市場的排行第一。

再比如海量存儲的需求,自2009年首次發(fā)布第一代文件存儲以來,華為持續(xù)投入海量數(shù)據(jù)存儲領域。2019年華為就發(fā)布了 OceanStor存儲Pacific系列的前身,與勘探、金融、基因測序、運營商等開始共同構筑場景案例。而華為OceanStor存儲Pacific系列更是集結了華為在存儲軟、硬件方面的多年積累。

在此基礎上,華為還砸探索新的存儲系統(tǒng)能力,比如嘗試打造顆粒級、內(nèi)核級可靠性,進一步優(yōu)化內(nèi)存與CPU之間的互聯(lián)互通……基于基礎能力、不間斷的技術迭代,也讓華為存儲得以在“新基建”的機遇關頭,成為數(shù)字化的產(chǎn)業(yè)基石。

2.冰山行動。

在沖繩島上,曾經(jīng)爆發(fā)過太平洋戰(zhàn)場中規(guī)模最大的兩棲登陸行動。航空轟炸+地面登陸,最終為二戰(zhàn)勝利奠定了基礎。

而在華為存儲的戰(zhàn)略中,我們也看到了對軟件與硬件的協(xié)同作戰(zhàn),發(fā)揮到了極致。

前面我們提到,華為OceanStor存儲Pacific系列的高密度硬件+多個軟件創(chuàng)新,引領了整個存儲產(chǎn)業(yè)的航向標。

實際上,早在2008年,華為就開始探索軟硬件協(xié)同的存儲系統(tǒng)方案。當時,華為將底盤和控制器的軟件結合起來,通過盤庫配合把性能方面做到極致。

2015年,華為又推出了雙活解決方案,把華為存儲能力和華為DWDM能力進行融合,在醫(yī)院、金融、運營商的系統(tǒng)中得到了廣泛應用。

在軟件定義的時代,華為也堅持保留自己硬件定義的能力。這與很多存儲的SDS廠商不同,但在今天海量數(shù)據(jù)的極限場景下,卻借由華為 OceanStor存儲Pacific系列展現(xiàn)出了硬件工藝與軟件算法所能達到的新高度。

3.攻占硫磺島。

“一島定乾坤”的故事,沒少在太平洋中上演,比如著名的中途島,以及少有人知的硫磺島。敵方頑強堅守的硫磺島,最終憑借浴血奮戰(zhàn),得以成為打開本土戰(zhàn)場的重要通道。

而在存儲領域里, AI是行業(yè)迭代的主旋律,也是華為所必須拿下的硫磺島。

所以在OceanStor智能分布式存儲系統(tǒng)中,“Storage for AI”(為AI而存)和“AI in Storage”(存儲智能)就成為整個戰(zhàn)略部署的主線。

像在華為OceanStor存儲Pacific系列中,就將AI融入存儲全生命周期管理。比如利用AI算法的能力,加上智能存儲管理系統(tǒng),以及整個華為云的智慧能力,將軟、硬、云三個AI有機體結合在一起,對不同的負載場景進行反復學習,不斷提高存儲效率和資源利用率,從而管理上盡可能減少人工操作,避免人為故障。

值得一提的是,這些AI模型還會在華為自己的業(yè)務流程和IT系統(tǒng)中進行實踐,確保算法模型成熟度之后,在華為OceanStor存儲Dorado系列、Pacific系列等不同系列里面進行推廣和使用,保障整體的可靠性。

而為了讓AI應用平臺能夠更好地作業(yè),華為存儲的Storage for AI也努力發(fā)揮最大效益,在自動駕駛、環(huán)境監(jiān)測、智慧交通等復雜的海量數(shù)據(jù)場景中,通過協(xié)議的互通,在管理面還是數(shù)據(jù)面進行打通,減少了數(shù)據(jù)的搬遷,可以直接縮短算法的訓練成型時間,讓萬物智能距離現(xiàn)實更進一步。

我們常說數(shù)據(jù)是智能時代的“石油”,它的采集、存儲、運輸、冶煉、使用等等,整合在一起決定了新的生產(chǎn)力能效。

正如華為數(shù)據(jù)存儲與機器視覺產(chǎn)品線總裁周躍峰所說,海量數(shù)據(jù)在企業(yè)數(shù)字化轉型中扮演著越來越重要的角色,然而當前只有2%的數(shù)據(jù)被保存、保存下來的數(shù)據(jù)只有10%得到分析利用。

存儲看起來只是一件小事,卻決定著數(shù)據(jù)能不能被安全、有效、低成本地抵達產(chǎn)業(yè)中樞,轉化為服務千行萬業(yè)的燃料。

華為存儲的探索,或許可以幫我們在沉沉海霧之中,踏實地航行在智能時代的無限路途。

免責聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關。文章僅供讀者參考,并請自行核實相關內(nèi)容。投訴郵箱:editor@fromgeek.com。

免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內(nèi)容或斷開相關鏈接。

2020-06-01
駛向智能海洋深處,華為存儲的無盡想象
數(shù)據(jù)的格式也在增多,從傳統(tǒng)的數(shù)據(jù)庫、二維數(shù)據(jù),逐漸擴展到語音、圖像、視頻等等新型多結構數(shù)據(jù),還可能被分別存儲在世界各地的不同地點……調(diào)查顯示,到2025年180ZB規(guī)模的數(shù)據(jù)中,有95%是非結構化的數(shù)

長按掃碼 閱讀全文