青云科技是技術領先的企業級云服務商與數字化解決方案提供商,同時也是專業的軟件定義存儲廠商,近日宣布推出青云存儲 QingStor U10000——真正實現數據無損互通的非結構化數據存儲軟件,專為支持 IoT、AI、生命科學等新興應用開發、現代數據分析和未來數據而生。
場景和算力演進推動青云產品創新
數字時代,不管是產生數據的終端數量或者產生的數據量級,均出現指數級增長。例如,目前全球物聯網終端設備數量已經達到 100 多億,一家智慧工廠每天可產生 PB 級的數據。同時,各種新興技術和應用會產生不同類別的海量數據。典型的自動駕駛、物聯網、AR、5G場景背后所產生的數據類型,主要以非結構化數據為主,包括圖片、音頻、視頻,以及日志類的數據。
眾所周知,這些海量數據天生是數字化的、多維的、多模式的、多區域分布的,并且是始終流動。如何讓流動的數據發揮出最大的價值,一直是青云存儲在積極探索的方向。
算力的演進對存儲形態的變化的推動也不容忽視。計算能力的承載從最初的大部分使用物理機,后來逐漸轉到虛擬化、云計算,再后來開始更多地轉向容器平臺、云原生。隨著計算形態的演變,整個計算單元的密度越來越高,計算的敏捷性越來越強,對存儲提出的要求也在發生變化,作為支撐青云云平臺的底層存儲,青云存儲也在應時而變。
在實踐中,青云也深刻體會到,每個公司、每個機構缺少的都不是數據,真正缺少的是在大量關鍵業務信息中快速獲得數據洞察的途徑。讓數據完整地或者相對完整地經歷生命周期的不同階段,在不同階段為數字化業務產生不同的價值,才能充分挖掘整個數據的價值。作為青云存儲面向海量非結構化數據的利器,QingStor U10000 由此誕生。
面向非結構化數據,U10000 解碼數字未來
QingStor U10000 是青云在 10 年存儲技術積累基礎上的一次全面地產品升級,并且實現軟件棧全自主設計與自主研發。U10000 繼承了原來青云對象存儲、文件存儲的所有能力,并且在多個維度上實現了產品力的增強和迭代。U10000面向海量非結構化數據的場景,主要包括各種影像數據、音視頻數據、數據湖、大數據、物聯網等,同時提供對象存儲、文件存儲、大數據接口,不同協議之間實現數據無損訪問互通。此外,單存儲桶支持 100+ 億個對象,并保持性能穩定。
這些能力基于 U10000 先進且合理的產品架構實現,主要由接入層、存儲服務層、運維平臺三大模塊構成。
接入層:提供 SMB、NFS、對象存儲 S3、HDFS 大數據接口,并且兼容標準的 POSIX 語義,以文件、對象、大數據三種接口的形態承載多樣業務的使用。
存儲服務層:作為核心的存儲引擎,提供豐富的高級功能特性、多維度資源管理功能以及核心機制,比如 EC 糾刪碼、多副本數據安全。
統一運維管理平臺:提供用戶友好的可視化管理平臺,實現對存儲集群的多維度配置、操作、預警和監控。
U10000 產品架構圖
此外,U10000 具有以下核心優勢,支持企業數據分析更高效且成本更低,數據價值挖掘更充分且更安全。
優勢一:多協議無損互通,數據訪問和流通更高效
U10000 在技術層面提供了統一的索引架構,并且基于統一的索引架構提供多種層次的能力,提供多協議存儲接口。每一個協議存儲或者寫入的數據,都可以通過其他協議讀取,讓數據分析更高效。
優勢二:支撐海量數據存儲,提供卓越性能
整個 U10000 的元數據和數據存儲服務都采用全分布式的架構,可以橫向擴展大規模數據存儲集群,同時保證性能和容量的線性增長,提供卓越的I/O性能。通過靈活的 EC 配比(即EC糾刪碼),保證整個集群物理磁盤的可用空間率達到90%以上。
優勢三:算力無縫對接,數據點石成金
得益于多年的積累,U10000 具備豐富的數據處理能力,能夠提供一系列完善的API、SDK,可以輕松地對接大數據平臺、數據處理的框架和服務,實現數據和算力的高效結合,最終讓數據實現點石成金。
優勢四:多維安全,數據穩如泰山
U10000 通過數據強一致性的處理、多副本策略,保證數據安全。通過多租戶訪問隔離、WORM、日志歸檔等多重訪問安全機制和智能預警機制,提升用戶使用安全性,同時提供可視化便捷的運維平臺,方便人員管理。
U10000是以業務場景為驅動、將其作為算力核心的設計理念進行全面升級的,在互聯網體檢、智能駕駛、數據影像、智慧工廠、IoT 和多元化超算等場景有著廣泛應用。例如某智能駕駛科技公司聚焦在自動駕駛背后的高精度地圖,其數據的采集和處理、分析,對存儲性能和擴展性、安全性提出了更高的要求。目前青云提供的 U10000 存儲集群及資源算力,基本上解決了其高精度地圖從采集、生產、訓練整個生命周期的存儲和算力的需求。
青云的基因是算力,從云而來,向云而去。青云對軟件定義存儲的思考一定不是孤立的,會聚焦在如何讓存儲更好地支撐算力,與之相輔相成。企業組織面臨著新的數據挑戰,希望當前的 IT 投入能夠滿足現在和未來的數據需求,為未來設計存儲架構就如同為未知設計架構,如此就需要 U10000 這種多維靈活的數據存儲。
以專業、自研的存儲,服務數字中國
目前,中國正在加速建立自己的 IT國產化生態體系,關鍵技術自主越來越重要。青云存儲全線產品已經實現了國產化生態的生產化兼容,包括鯤鵬、飛騰、海光等目前主流的國產硬件平臺,還有麒麟軟件、統信、openEuler 等國產操作系統。
青云科技一直秉承對技術自主可控的追求,懷揣著中國存儲服務數字中國的愿景,以真正自研的中國存儲服務于企業客戶。