9月21日,在“數聚萬(wàn)象 澎湃未來(lái)”宏杉科技分布式存儲線(xiàn)上研討會(huì )暨新一代產(chǎn)品發(fā)布活動(dòng)上,宏杉科技正式發(fā)布“萬(wàn)象”分布式存儲家族。宏杉科技“萬(wàn)象”分布式存儲采用分布式去中心化的架構,支持文件、塊、對象、大數據等多樣化的存儲服務(wù),通過(guò)搭載不同的硬件平臺,能夠滿(mǎn)足AI、HPC等海量數據存儲場(chǎng)景的需求,為企業(yè)構建堅實(shí)的海量存儲數據底座,助力實(shí)現數字化轉型。
承載宏杉科技分布式存儲的創(chuàng )新積淀
根據中國信通院調查數據顯示,2021年中國分布式存儲市場(chǎng)規模達到178億元,年增速44%;預計未來(lái)三年,市場(chǎng)仍將保持40%以上的增長(cháng)率。在數據爆發(fā)式增長(cháng)的今天,企業(yè)數據中心在承載海量、多元數據的同時(shí),如何快速從海量非結構化數據中獲取數據價(jià)值,將是企業(yè)數據基礎設施建設的關(guān)鍵。憑借敏捷擴展、經(jīng)濟性等特點(diǎn),分布式存儲已經(jīng)成為承載海量非結構化數據的重要載體,除了滿(mǎn)足傳統的海量存儲場(chǎng)景需求外,分布式存儲還被廣泛需求于大數據、AI、高性能計算等高并發(fā)、低延遲新型應用存儲場(chǎng)景,這也成為存儲技術(shù)的重要趨勢。

近年來(lái),宏杉科技在分布式存儲領(lǐng)域已進(jìn)行了大量探索——推出CloudSUN統一存儲平臺,將各類(lèi)存儲通過(guò)特殊網(wǎng)絡(luò )聯(lián)系在一起,形成可以統一調度管理的存儲資源池;針對高性能計算業(yè)務(wù),推出定制化分布式存儲產(chǎn)品、基于存儲陣列的分布式存儲系統引擎。
目前,宏杉科技分布式存儲產(chǎn)品已經(jīng)廣泛賦能金融票據、醫療影像、國土測繪、大數據分析等產(chǎn)生海量數據的應用場(chǎng)景。本次發(fā)布的“萬(wàn)象”,是宏杉科技在分布式存儲領(lǐng)域的最新成果,融入了大量創(chuàng )新特性。
構建海量數據存儲底座
安全承載業(yè)務(wù)系統產(chǎn)生的海量數據是企業(yè)對于分布式存儲的基礎需求。這意味著(zhù),分布式存儲系統在為爆發(fā)式增長(cháng)的數據提供海量、高擴展、高性?xún)r(jià)比存儲空間的同時(shí),也要確保海量數據在存儲過(guò)程中的安全性與可靠性。依托優(yōu)秀的軟硬件創(chuàng )新能力,宏杉科技“萬(wàn)象”分布式存儲具備高擴展能力的存儲架構、豐富的協(xié)議支持以及多平臺的適應能力,無(wú)懼海量數據存儲挑戰。

在架構上,宏杉科技“萬(wàn)象”分布式存儲采用分布式去中心化架構,提供了靈活的擴展能力:在該架構的支持下,“萬(wàn)象”分布式存儲元數據配置更加靈活,擁有支持上萬(wàn)個(gè)節點(diǎn)的擴展能力。另外,“萬(wàn)象”分布式存儲還采用了先進(jìn)的元數據集群架構,通過(guò)宏杉科技自研的元數據分布算法,可以消除單Master的瓶頸或Hash算法的規模限制,在實(shí)現全對稱(chēng)部署的前提下極大提升了存儲規模。

在網(wǎng)絡(luò )、協(xié)議與平臺支持上,宏杉科技“萬(wàn)象”分布式存儲幾乎支持所有主流協(xié)議,便于數據跨平臺部署與流動(dòng):“萬(wàn)象” 分布式存儲同時(shí)支持10Gb、25Gb和100Gb的以太網(wǎng)、高性能計算常用的InfiniBand組網(wǎng),以及RDMA技術(shù);訪(fǎng)問(wèn)協(xié)議方面,豐富的接口確保萬(wàn)象與任何主流業(yè)務(wù)實(shí)現無(wú)縫對接——擁有融合了目前主流的文件、對象、塊和大數據接口,包括NFS、CIFS、Http、FTP、S3、Swift、iSCSI、HDFS等;面對多云應用場(chǎng)景,“萬(wàn)象”分布式存儲可以在各種主流的虛擬化、容器、云環(huán)境中部署,支持OpenStack的Cinder、Kubernetes的CSI等,同時(shí),數據可通過(guò)云橋軟件實(shí)現在云端的流動(dòng)。
在可靠性方面,“萬(wàn)象”分布式存儲提供了極致可靠的存儲機制,全面保護用戶(hù)數據安全:“萬(wàn)象”分布式存儲充分利用宏杉科技SAN存儲雙控制器高可靠性,解決傳統分布式存儲節點(diǎn)穩定性較低的問(wèn)題,提升整體分布式存儲系統的健壯性。“萬(wàn)象”還提供基于系統內部客戶(hù)端和用戶(hù)的精細化訪(fǎng)問(wèn)控制機制,支持多副本和目錄級糾刪碼、雙活、復制、兩地三中心等多種冗余保護措施,為用戶(hù)提供多層級的數據保護和容災功能,進(jìn)一步實(shí)現了用戶(hù)數據存儲的極致可靠。
在擴展性方面,“萬(wàn)象”分布式存儲能夠靈活擴展、充分利舊:“萬(wàn)象”分布式存儲統一命名空間,將塊、對象、文件、HDFS等存儲協(xié)議打通,實(shí)現一池多用,所有應用端均可在線(xiàn)訪(fǎng)問(wèn)全空間實(shí)時(shí)數據。此外,“萬(wàn)象”產(chǎn)品在同一個(gè)分布式存儲集群中,實(shí)現了服務(wù)器節點(diǎn)和SAN存儲節點(diǎn)混用,建立不同的數據資源池,能滿(mǎn)足不同應用對于分布式存儲性能的不同需求,并充分利舊,降低投資成本。
在性能方面,“萬(wàn)象”分布式存儲擁有極致性能,能夠極大提升數據利用效率:“萬(wàn)象”分布式存儲采用面向未來(lái)的磐石架構,集成全內核態(tài)協(xié)議棧,可以無(wú)限壓低時(shí)延;支持端到端NVMe協(xié)議;支持使用RDMA智能加速充分發(fā)揮硬件能力。憑借宏杉科技自研的并行文件系統、高性能客戶(hù)端、小文件聚合等功能,“萬(wàn)象”能夠實(shí)現千億小文件快速低延時(shí)訪(fǎng)問(wèn);同時(shí),它還擁有業(yè)界最徹底的協(xié)議共享能力,實(shí)現所有非結構化數據協(xié)議互通,數據0遷移拷貝,提高訪(fǎng)問(wèn)效率,節省存儲成本。

“萬(wàn)象”分布式存儲實(shí)現了智能存儲管理:“萬(wàn)象”分布式存儲搭載宏杉科技自研的云橋智能數據處理平臺,能夠連接多種非結構化、半結構化和結構化數據源,通過(guò)多個(gè)并行處理的工作流對數據進(jìn)行加工處理,形成統一的數據資產(chǎn)圖譜。
驅動(dòng)數據價(jià)值高效發(fā)揮 助力企業(yè)數字化轉型
除了具備高擴展、高可靠、多平臺融合的數據存儲特性,“萬(wàn)象”分布式存儲還提供了高性能的存儲響應能力、復雜環(huán)境下的數據處理能力以及跨平臺的數據調度能力,通過(guò)四大產(chǎn)品系列——C系列、P系列、V系列、M系列,面向不同行業(yè)場(chǎng)景提供不同的性能、功能、擴展性等選項,幫助企業(yè)高效利用數據,充分發(fā)揮數據價(jià)值。

萬(wàn)象C系列:面向虛擬化、云平臺、數據庫等業(yè)務(wù)場(chǎng)景;
萬(wàn)象P系列:面向人工智能、自動(dòng)駕駛、高性能等對IOPS、低延時(shí)、高吞吐的業(yè)務(wù)場(chǎng)景;
萬(wàn)象V系列:通過(guò)搭載高密度硬件平臺,單節點(diǎn)實(shí)現6U118盤(pán)位,單節點(diǎn)達到2.3PB, 適用于海量數據長(cháng)期保存業(yè)務(wù)場(chǎng)景;
萬(wàn)象M系列:融合宏杉科技SAN基礎架構,適用于對高可靠有極致要求的場(chǎng)景,可以充分利用SAN存儲高靠?jì)?yōu)勢,同時(shí)可以降低用戶(hù)投資。
數據已成為新型生產(chǎn)要素,云、大數據、AI等新技術(shù)的快速普及帶來(lái)海量非結構化數據,分布式存儲市場(chǎng)將持續穩健增長(cháng)。宏杉科技憑借全面的自主研發(fā)能力,經(jīng)過(guò)多年創(chuàng )新積累,成功打造“萬(wàn)象”分布式存儲家族,以解決方案為核心,聚焦多樣化應用場(chǎng)景,釋放數據生產(chǎn)力,全力幫助百行百業(yè)構建數據智能管理平臺,存好、用好、管好數據。