近日,國際數(shù)據(jù)公司(IDC)發(fā)布《中國軟件定義存儲(SDS)及超融合存儲(HCI)系統(tǒng)市場季度跟蹤報告,2023Q3》。報告顯示,2023年第三季度,深信服EDS存儲以7.7%的市占率位列中國文件存儲市場第五。
市場認(rèn)可的背后,是深信服EDS存儲對技術(shù)創(chuàng)新的堅持、更是對卓越性能的極致追求。
隨著AI訓(xùn)練、芯片等高精尖產(chǎn)業(yè)的快速發(fā)展,對存儲系統(tǒng)的“綜合性能”提出了更高的要求。在存儲賽道上,作為支持混合IO負(fù)載、兼具大小文件能力的一款存儲產(chǎn)品,深信服EDS存儲憑借自研技術(shù)破解了“大容量、高性能、高性價比”的不可能之三角。
一、自研創(chuàng)新、技術(shù)突破,解決分布式存儲“不可能之三角”
2023年,深信服發(fā)布了EDS存儲501高性能版本,通過自研技術(shù)的創(chuàng)新,幫助用戶實現(xiàn)存儲容量擴(kuò)展、性能提升的兼得。
性能和容量線性同步擴(kuò)展
一方面,結(jié)合分布式存儲架構(gòu)的天然優(yōu)勢,當(dāng)用戶需要更大的存儲空間或者處理能力時,只需要添加更多的節(jié)點即可,無需改變已有的硬件或軟件結(jié)構(gòu),也無須面臨替換存儲陣列硬件的昂貴投入。同時,EDS存儲設(shè)計的讀寫模式充分適應(yīng)了SSD與HDD混合閃存介質(zhì)的特性,以此充分激發(fā)硬件性能。
另一方面,基于多活的元數(shù)據(jù)能力、IO整合、數(shù)據(jù)緩存與協(xié)議增強(qiáng)等核心技術(shù)的突破,充分發(fā)揮各節(jié)點的性能優(yōu)勢,提升海量小文件和大文件高吞吐場景的性能。
深信服EDS存儲性能和容量線性同步擴(kuò)展
在元數(shù)據(jù)處理上,讓元數(shù)據(jù)訪問效率提升10倍以上,可緩存的元數(shù)據(jù)規(guī)模是Ceph系產(chǎn)品的7倍,在 AI 訓(xùn)練等場景下可以保持 90% 以上的元數(shù)據(jù)命中率。
通過小文件的聚合和動態(tài)IO整合,解決容量使用超過80%后導(dǎo)致的垃圾回收擠占而性能下降的問題。
對于延遲敏感型業(yè)務(wù),采用自適應(yīng)三級緩存技術(shù),將數(shù)據(jù)時延降至us級。
在協(xié)議增強(qiáng)上,相比于標(biāo)準(zhǔn)文件共享協(xié)議,提升2-3倍,進(jìn)一步降低協(xié)議對性能的額外開銷,縮短時延和提升性能。
體驗更好,成本更低
與此同時,深信服找到了獲得高性能和大容量的高性價比答案。
通過冷熱數(shù)據(jù)自動分層,熱數(shù)據(jù)存儲在NVMe 或SATA固態(tài)盤構(gòu)建的高性能層,冷數(shù)據(jù)存儲在機(jī)械盤構(gòu)建的大容量層,幫助用戶節(jié)省存儲的硬件成本。
基于深舟數(shù)據(jù)管理平臺、EDS存儲Data Explorer等軟件,實現(xiàn)數(shù)據(jù)的高效壓縮和管理,64GB內(nèi)存可以承載億級以上規(guī)模小文件的高速讀寫,幫助用戶合理規(guī)劃存儲的投入成本。
通過實現(xiàn)高性能、大容量、高性價比的平衡,EDS存儲希望幫助用戶獲得性能和容量的真正“自由”。
二、用核心業(yè)務(wù)的高性能,鑄就客戶口碑的試金石
一款好的存儲產(chǎn)品,不僅是實驗室里的高性能,更是用戶生產(chǎn)環(huán)境的實際需求的高性能。
2023年,深信服EDS存儲走進(jìn)高精尖場景,落到真實的業(yè)務(wù)場景,針對業(yè)務(wù)特征進(jìn)行性能優(yōu)化,為實際業(yè)務(wù)運行帶去更好的體驗。
在AI訓(xùn)練場景,3節(jié)點小規(guī)模存儲集群支撐訓(xùn)練過程Checkpoints保存和恢復(fù)吞吐可達(dá)100GB/s,保障模型訓(xùn)練的連續(xù)性。
在PACS閱片場景,在業(yè)務(wù)高峰期閱片終端的圖像加載速度可達(dá)到1000幅/s,數(shù)百位門診、臨床醫(yī)生同時閱片、對存儲系統(tǒng)產(chǎn)生高并發(fā)訪問,閱片效率不受影響。
在測繪作業(yè)場景,小文件時延降低到us級,支撐200+臺工作站并發(fā)建模不掉速,建模效率相比于傳統(tǒng)NAS存儲提升2倍。
在芯片設(shè)計場景,僅需3臺通用X86設(shè)備,就可以承載超過2000核的算力負(fù)載,提供數(shù)十萬的小文件OPS能力、大文件的讀寫性能達(dá)到6GB/s,EDA前端設(shè)計場景混閃能超過700路。
在視頻制作場景,承載動畫制作、渲染、后期特效/合成等全流程核心業(yè)務(wù),5臺EDS存儲最大可提供超過7.5GB/s帶寬,滿足用戶400多人團(tuán)隊的并行影音文件讀取和同時編輯創(chuàng)作需求。
三、為AI而生,更高性能,EDS存儲全新版本將重磅發(fā)布
在1月26日即將舉辦的深信服2024春季新品發(fā)布會上,深信服將正式發(fā)布EDS存儲全新版本。
作為真正為AI大模型而生的全新版本,EDS存儲面向AI采、標(biāo)、訓(xùn)、推、歸檔全過程提供統(tǒng)一的數(shù)據(jù)存儲底座,實現(xiàn)一套存儲滿足AI模型開發(fā)全流程、多業(yè)務(wù)部門、多環(huán)境的存儲需求。
勝任高精尖領(lǐng)域的各種存儲需求,這并非終點,而只是開始。
未來,深信服會繼續(xù)將卓越的性能和可靠性延伸至更多行業(yè),基于充分的技術(shù)積累和持續(xù)創(chuàng)新的底氣,助力千行百業(yè)實現(xiàn)全方位的數(shù)字化。
