數(shù)據(jù)量的爆炸式增長和企業(yè)對數(shù)據(jù)價值挖掘的渴求,正在讓存儲市場迎來前所未有的發(fā)展機遇。一方面,分布式存儲正在經(jīng)歷快速的增長時期,IDC 2019年市場預測報告顯示,無論是對象存儲、文件存儲還是塊存儲,分布式存儲在未來幾年里都會保持兩位數(shù)高速增長。另一方面,全閃存儲逐漸成為主流,據(jù)IDC市場報告顯示,全閃存儲在所有采用存儲的企業(yè)里幾乎占據(jù)80%的使用率。
正因為預見到存儲市場即將發(fā)生的巨大變化,青云QingCloud (qingcloud.com)自2012年開始推出第一個版本的云計算產(chǎn)品,就在存儲的底層堅持采用完全自研的方式,經(jīng)過8年磨礪,積累了大量在云計算環(huán)境下,對于存儲的需求與技術(shù)的實踐。到目前為止,推出的QingStor產(chǎn)品家族包含QingStor NeonSAN、QingStor對象存儲、QingStor文件存儲、QingStor融合存儲等四款產(chǎn)品,共同支撐市面上幾乎全部主流的云計算產(chǎn)品。作為底層存儲引擎,可以說QingStor是“為云設(shè)計、為云而生”的一款產(chǎn)品。
從零開始的勇氣:100%自主設(shè)計和研發(fā)
“跟其他做分布式存儲的公司最大的不同是,QingStor在公有云和私有云是采用同一套架構(gòu),同一套代碼實現(xiàn)的??梢哉f,QingStor全線產(chǎn)品是經(jīng)過公有云和私有云共同的檢驗,得到大規(guī)模生產(chǎn)環(huán)境驗證的。”QingStor 存儲產(chǎn)品線研發(fā)負責人王煜特別強調(diào)。
相較于當下國內(nèi)的分布式廠商中,有些是基于開源的分布式存儲作為底層做二次封裝和二次開發(fā),QingStor全線產(chǎn)品均從零開始,自主設(shè)計、自主研發(fā),本質(zhì)區(qū)別在于從架構(gòu)設(shè)計階段,QingStor采用了自己的架構(gòu)設(shè)計理念,完全沒有參考當下開源的存儲架構(gòu)。
我們清楚的明白自研的道路一定是艱難的,那為什么QingStor非要這么做呢?對此QingStor存儲產(chǎn)品線研發(fā)負責人王煜向媒體解釋出了選擇自研方向的兩點主要原因:

首先,青云QingCloud認為目前沒有一款開源存儲,能夠滿足企業(yè)核心上云過程中對于存儲的嚴格要求。
例如,Ceph本身在性能上有很大的弊端,很難承載企業(yè)客戶關(guān)鍵性的核心業(yè)務(wù)。HDFS是Google 2006年GFS論文的開源實現(xiàn),針對互聯(lián)網(wǎng)大數(shù)據(jù)的場景,并不非常通用,單點及擴展性問題都是難題。
其次,青云QingCloud希望作為一家中國企業(yè),能夠為客戶提供全棧自主可控的優(yōu)質(zhì)產(chǎn)品,從而消除企業(yè)對數(shù)據(jù)安全的顧慮。
對于QingStor家族的四款產(chǎn)品,每一款都是在架構(gòu)設(shè)計時采用獨立的設(shè)計方法,原因就在于企業(yè)的存儲場景多樣且復雜,不存在一種架構(gòu)設(shè)計能夠完全滿足所有存儲場景,對于性能、大容量、高IOPS、高吞吐量的需求各有不同。
如果想要通過“銀彈架構(gòu)”解決所有場景問題,就必然在某一些場景下做出犧牲。而QingStor家族的四款產(chǎn)品則分別專門針對極致性能、海量數(shù)據(jù)、通用場景、高性價比而設(shè)計,可以很好的滿足核心業(yè)務(wù)、對象存儲、文件存儲、融合存儲的需求。
到目前為止,QingStor的產(chǎn)品家族已經(jīng)積累了數(shù)萬家企業(yè)客戶,部署在公有云和私有云上。在公有云部分,QingStor全線產(chǎn)品已經(jīng)上線和部署在青云QingCloud的8個公有云區(qū)。在私有云部分,QingStor幾乎覆蓋了全部主流的行業(yè),擁有非常多的行業(yè)客戶案例。
另外,本次QingStor升級發(fā)布最為核心的是將存儲全棧產(chǎn)品線進行國產(chǎn)化。除了軟件架構(gòu)的部分,底層的芯片和操作系統(tǒng),也跟很多國產(chǎn)化廠商進行合作和互認證,包括鯤鵬、海光、飛騰、浪潮O(jiān)penPower等,還有操作系統(tǒng),統(tǒng)信軟件、麒麟等。

進而希望通過國產(chǎn)化適配,能夠讓QingStor存儲產(chǎn)品線實現(xiàn)全棧國產(chǎn)化,以此消除企業(yè)客戶的顧慮和擔憂。
QingStor存儲家族壯大,成員各具亮點
本次會上,QingStor存儲家族更迎來了全線升級:包括QingStor NeonSAN 3.0、QingStor 對象存儲 3.0、QingStor 文件存儲 2.0 以及管理平臺 Portal 3.0。同時,青云QingCloud也推出容器存儲一體機 KubeSphere KF3000 和分布式全閃存儲一體機 QingStor NF6000 兩大新品。具體來看此次升級:
分布式塊存儲QingStor NeonSAN,面向企業(yè)關(guān)鍵業(yè)務(wù)與核心數(shù)據(jù)的性能擔當。此次主要從場景能力和功能兩大方面進行提升。在場景能力方面,QingStor NeonSAN 針對云平臺/虛擬化場景、大數(shù)據(jù)場景、業(yè)務(wù)連續(xù)性場景以及容器/云原生四個主要核心場景進行能力升級,如圍繞云平臺/虛擬化場景新增兼容平臺 VMware vSphere 7.0、Hyper-v、Hadoop 等提供新的特性;圍繞大數(shù)據(jù)場景提高存儲使用效率和大數(shù)據(jù)應用能力;圍繞業(yè)務(wù)連續(xù)性場景提供整套完整解決方案,提高資源管理能力,簡化管理難度等。

在功能方面,新增4大功能,分別為異構(gòu)存儲池支持、卷粒度的QoS、在協(xié)議層面的全RDMA互聯(lián),并對業(yè)界最主流的NVMeoF協(xié)議實現(xiàn)支持。
QingStor 對象存儲 3.0,一款魚和熊掌兼得的存儲服務(wù),兼得存儲性能和海量數(shù)據(jù)。在3.0版本中帶來的新能力主要有更多的數(shù)據(jù)場景,并在性能上保持領(lǐng)先。

QingStor對象存儲3.0,在對象版本控制、數(shù)據(jù)追加寫入、數(shù)據(jù)跨區(qū)域復制,以及生態(tài)工具四個功能上有所提升。此外新版本還具有新的能力的變化,一方面QingStor對象存儲3.0具有更強的、更具優(yōu)勢的存儲性能。另一方面QingStor對象存儲3.0可以服務(wù)于更多的數(shù)據(jù)應用場景,如數(shù)據(jù)遷移、數(shù)據(jù)保護、數(shù)據(jù)備份、AI視頻監(jiān)控。
QingStor 文件存儲 2.0,一款云計算基礎(chǔ)架構(gòu)下,更加通用的文件存儲產(chǎn)品。此次更新通過局部服務(wù)架構(gòu)優(yōu)化、更先進的編程語言,使得QingStor文件存儲性能提升明顯。例如,在系統(tǒng)架構(gòu)層面持續(xù)升級,增加智能 I/O 邏輯,并通過采用更加安全、高效的系統(tǒng)級開發(fā)語言 Rust 重構(gòu)核心模塊,提升性能,如單客戶端 4k 隨機讀寫提高超過 200%,單客戶端 64k 順序讀寫吞吐提高 100%。

在通用更新中,QingStor將管理平臺Portal升級為3.0版本,主要的升級內(nèi)容包括:加入了對象存儲的管理,實現(xiàn)存儲后臺的統(tǒng)一管理,可以用同一個管理后臺管理所有存儲產(chǎn)品;加入了豐富的可視化圖形,增強企業(yè)運維人員對存儲的理解;增加了硬盤健康狀況預警功能,幫助運維人員在硬盤發(fā)生故障之前,提早預測系統(tǒng)內(nèi)部可能發(fā)生的故障。

KubeSphere KF3000,結(jié)合KubeSphere 以及QingStor NeonSAN兩款產(chǎn)品本身的企業(yè)級能力,旨在幫助企業(yè)級用戶快速落地的容器平臺。在KubeSphere KF3000一體機上,青云QingCloud不僅做了代碼的優(yōu)化,同時還進行了軟硬件一體化的調(diào)優(yōu),并且,通過大量的深層優(yōu)化而具有整體性的產(chǎn)品,提供整體的商用級服務(wù)。

在容器平臺上批量創(chuàng)建pod的場景上,批量創(chuàng)建100個pod以及pv卷的時間僅為70秒,通過FIO工具,單pod可提供10萬以上的IOPS,時延只有0.17ms。
QingStor NF6000分布式全閃存儲一體機,旨在實現(xiàn)高性能全閃的普惠?;趚86架構(gòu)的服務(wù)器,可實現(xiàn)在3個節(jié)點下有100萬IOPS性能指標,時延可保持在0.5ms以下。在運維層面,針對已選定的硬件,還可以做硬盤點燈的功能,減少運維層面的工作內(nèi)容。

有了兩款硬件產(chǎn)品的加持,利用軟硬件結(jié)合的匹配度,用戶便可以在存儲方面做到更加穩(wěn)定、性能更加出色,且運維效率能夠得到大大的提升。
總結(jié):自研的道路往往是孤單、艱難的,長期大量的投入,或許效果還不盡人意,所以這份勇氣與魄力非一般企業(yè)能承受。一路走來,青云QingCloud往往能將挑戰(zhàn)化為機會,細心打磨產(chǎn)品,不斷為用戶提供更有價值的服務(wù)與選擇,而青云QingCloud存儲市場的表現(xiàn)更是可圈可點的。由此可見,在QingStor分布式存儲走向成功的道路上,勇氣與實力缺一不可。






