隨著數(shù)字化時代的到來,數(shù)據(jù)滲透于我們生活的方方面面。伴隨著大數(shù)據(jù)、人工智能、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、人工智能等技術(shù)對生活與商業(yè)的滲透,無法否認(rèn),我們已進(jìn)入數(shù)字化的新時代。這些變化帶來了當(dāng)今產(chǎn)業(yè)界共同關(guān)心的話題,如何更好的存儲海量數(shù)據(jù)?
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼
西部數(shù)據(jù),一家在存儲領(lǐng)域深耕51年的領(lǐng)導(dǎo)者,參展2021深圳國際大數(shù)據(jù)與存儲峰會暨展覽會。此次峰會包含主論壇、圓桌對話、數(shù)據(jù)存儲、分布式存儲、云存儲、區(qū)塊鏈存儲等主題論壇,超過50余場的專業(yè)論壇分享。西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼在大會上帶來了以“創(chuàng)新存儲架構(gòu),突破IPFS算力瓶頸”為主題的演講,重點介紹了基于分布式存儲的Web3.0或IPFS的基礎(chǔ)設(shè)施架構(gòu)下相應(yīng)的存儲技術(shù)和解決方案。
在演講中,劉鋼表示:在2024年的時候,以HDD為代表的大數(shù)據(jù)預(yù)計將增長到1.62ZB,那從現(xiàn)在開始到2024年,年化增長率在30%左右。除了大數(shù)據(jù)以外還有快數(shù)據(jù),因為我們不僅想把數(shù)據(jù)存儲下來,還希望能夠?qū)?shù)據(jù)進(jìn)行挖掘、進(jìn)行計算,來為客戶的商業(yè)提供幫助。
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼
根據(jù)調(diào)研數(shù)據(jù),到2024年日常所產(chǎn)生的數(shù)據(jù)量將超過143ZB,然而,受存儲技術(shù)與存儲架構(gòu)限制,其中,只有約2ZB能夠被存儲下來,占比還不足1.5%。在數(shù)字時代下,數(shù)據(jù)已經(jīng)成為了我們每個人重要的資產(chǎn),如何存儲自己的大量數(shù)字化資產(chǎn)也是越來越多人將要面臨的問題。
但目前,數(shù)據(jù)存儲面臨著挑戰(zhàn)。用戶對于存儲的需求總結(jié)下來為四個方面,大容量、快速訪問、低成本、還需要低功耗。然而,目前來講仍然無法找到一種存儲介質(zhì)能夠同時滿足以上要求。但是,換一種思路,將數(shù)據(jù)存儲劃分為不同的應(yīng)用場景的需求,再針對應(yīng)用場景的特性來提供對應(yīng)的存儲解決方案,這就是存儲架構(gòu)的創(chuàng)新,即分布式存儲架構(gòu)。西部數(shù)據(jù)根據(jù)數(shù)據(jù)使用頻率將其分層,由低到高依次為極冷數(shù)據(jù)、冷數(shù)據(jù)、溫數(shù)據(jù)、熱數(shù)據(jù)和極熱數(shù)據(jù),并針對不同數(shù)據(jù)層來提供不同存儲解決方案。
西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼
基于此,IPFS去中心化分布式存儲“應(yīng)運而生”。 以去中心化為特點的IPFS存儲架構(gòu),相較于傳統(tǒng)的中心化思路的云存儲服務(wù)商,能夠顯著的節(jié)省它們的服務(wù)提供成本,進(jìn)而降低整體系統(tǒng)的存儲成本。同時,有統(tǒng)計數(shù)據(jù)表明, IPFS存儲相比較云供應(yīng)商的發(fā)展步伐更快,僅僅用了4個季度,18TB大容量硬盤就成為了主流。而且對于用戶選擇更高容量存儲設(shè)備的好處是十分明顯的。因為單個硬盤容量密度越高,相應(yīng)的服務(wù)器數(shù)量就會減少,這也就意味著單位功耗會降低,相應(yīng)的部署成本和運營維護(hù)成本也會減少。
劉鋼在演講中還分享道,“本季度很多IPFS服務(wù)商和云服務(wù)商已經(jīng)在考慮遷移到18T高密度的硬盤。比如Dropbox,全球領(lǐng)先的云存儲服務(wù)商,它在去年年底就已經(jīng)遷移到20T SMR HDD了。通過遷移到20T SMR,得到了更低的總體擁有成本(TCO)與更高的存儲密度。”
與中心化的存儲方式相比,IPFS存儲面向全球構(gòu)建了一個點對點的分布式版本文件系統(tǒng),利用哈希的地址來替代基于域名的地址,并且還用點對點的IPFS存儲協(xié)議,替代集中式超文本傳輸協(xié)議(也就是HTTP)。IPFS將存儲的技術(shù)與區(qū)塊鏈技術(shù)結(jié)合,為企業(yè)級用戶提供了新的存儲選擇。
在技術(shù)方面,劉鋼為在場的行業(yè)同仁分享了西部數(shù)據(jù)近些年進(jìn)行的一些探索。 以大數(shù)據(jù)存儲而言,基于其少量寫入、大量讀取、大量數(shù)據(jù)的應(yīng)用特性,西部數(shù)據(jù)將其歸為極冷數(shù)據(jù)和冷數(shù)據(jù)類別,并為其提供了業(yè)界單碟最高2.2TB,總?cè)萘窟_(dá)20TB的Ultrastar DC HC650。盡管業(yè)界近些年一直傳HDD將被SSD大規(guī)模取代,但目前來講這部分?jǐn)?shù)據(jù)更適合成本更低的HDD進(jìn)行存儲。除了成本更低之外,HDD相較SSD也更適合長時間存儲。對于超大規(guī)模數(shù)據(jù)中心和云計算領(lǐng)域,憑借氦密封技術(shù)提供的出色功耗以及機(jī)械創(chuàng)新,西部數(shù)據(jù)HDD容量方面領(lǐng)先業(yè)界,還使客戶能夠更有效地配置和擴(kuò)展數(shù)據(jù)中心環(huán)境,同時提供更低的總體擁有成本。
今年西部數(shù)據(jù)與合作伙伴鎧俠聯(lián)合研發(fā)出第六代162層3D閃存技術(shù),采用超越傳統(tǒng)八層交錯式存儲孔陣列的領(lǐng)先架構(gòu),其橫向單元陣列密度比第五代技術(shù)提高了約10%,能夠使晶圓尺寸減小約40%,每個晶圓的制造位增加了高達(dá)70%,從而優(yōu)化了成本。
峰會現(xiàn)場西部數(shù)據(jù)展臺
除此之外,西部數(shù)據(jù)也攜手眾多合作伙伴,將存儲技術(shù)和存儲架構(gòu)應(yīng)用到IPFS領(lǐng)域。西部數(shù)據(jù)、星辰天合、浪潮聯(lián)合推出的IPFS解決方案,該解決方案搭載了專為 IPFS 場景而生的 XSFS系統(tǒng),基于通用的 X86 服務(wù)器構(gòu)建了一個無限擴(kuò)容、持續(xù)在線的高性價比存儲架構(gòu)體系,并且通過部署西部數(shù)據(jù)Ultrastar DC HC550 18TB硬盤,顯著提高了的存儲容量,同時降低集群的節(jié)點數(shù)量,節(jié)省能耗、機(jī)柜空間等相應(yīng)成本;西部數(shù)據(jù)還攜手長城超云打造了IPFS“新范式”, 以西部數(shù)據(jù)高性能大容量企業(yè)級硬盤Ultrastar DC HC550 18TB HDD為基礎(chǔ),設(shè)計了異構(gòu)產(chǎn)品組合的集群測試方案,包括Miner、Worker和Storage,大幅提升了客戶的業(yè)務(wù)效率,從而增強了客戶在IPFS領(lǐng)域的核心競爭力。
西部數(shù)據(jù)Ultrastar DC SN840 NVMe SSD和西部數(shù)據(jù)Ultrastar DC HC550 18TB HDD
西部數(shù)據(jù)作為數(shù)據(jù)存儲行業(yè)的領(lǐng)導(dǎo)者,致力于為廣大的用戶群體提供可以滿足不同需求的存儲解決方案。同時,也為了更好的迎接數(shù)據(jù)井噴式增長,幫助用戶存儲重要的數(shù)據(jù),西部數(shù)據(jù)會就數(shù)據(jù)存儲架構(gòu)和高性能解決方案的整體優(yōu)化,進(jìn)行更多的技術(shù)投入和合作,共同推動未來數(shù)據(jù)存儲架構(gòu)的激活和發(fā)展。
申請創(chuàng)業(yè)報道,分享創(chuàng)業(yè)好點子。點擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!