隨著數(shù)字經(jīng)濟(jì)深入發(fā)展，數(shù)據(jù)已上升為與土地、勞動力、資本、技術(shù)并列的生產(chǎn)要素。如何讓“數(shù)據(jù)金礦”體現(xiàn)更多的價值已成為行業(yè)關(guān)注的焦點。
對此，青云科技存儲產(chǎn)品總監(jiān)馮相東表示，當(dāng)前，數(shù)字經(jīng)濟(jì)時代，海量數(shù)據(jù)已體現(xiàn)出兩個重要的特征：一是不管是產(chǎn)生數(shù)據(jù)的終端數(shù)量還是產(chǎn)生的數(shù)據(jù)量級，和十幾年前比，均出現(xiàn)指數(shù)級增長。二是自動駕駛、物聯(lián)網(wǎng)、AR、5G場景背后所產(chǎn)生的數(shù)據(jù)類型主要以非結(jié)構(gòu)化數(shù)據(jù)為主，包括圖片、音頻、視頻以及一些日志類的數(shù)據(jù)。
“海量數(shù)據(jù)持續(xù)增加，越來越多的人意識到簡單地把這些海量數(shù)據(jù)存起來，其實并沒有發(fā)揮這些數(shù)據(jù)的價值，或者說靜止的數(shù)據(jù)是沒有多少價值可言的，必須讓數(shù)據(jù)流動起來，讓數(shù)據(jù)完整地或者相對完整地經(jīng)歷生命周期的不同階段，在不同階段為數(shù)字化業(yè)務(wù)產(chǎn)生不同的價值，才能充分挖掘整個數(shù)據(jù)的價值。”馮相東強(qiáng)調(diào)。
在數(shù)據(jù)流動的完整鏈條里，從最初的采集、處理到后面的歸檔、再利用、銷毀，都會涉及到存儲與大數(shù)據(jù)技術(shù)、存儲與 AI 計算技術(shù)的結(jié)合，這能讓數(shù)據(jù)更高效地被捕獲、被索引、被分析和被加工，從而實現(xiàn)數(shù)據(jù)層面的點石成金。這也是青云存儲這些年一直在努力研究的一個方向。
青云深耕存儲領(lǐng)域，形成專業(yè)和自研兩大特點。
關(guān)于專業(yè)，是指專業(yè)存儲服務(wù)專業(yè)場景。目前青云存儲經(jīng)過產(chǎn)品的演進(jìn)，QingStor產(chǎn)品線主要由兩款核心產(chǎn)品構(gòu)成：一是 QingStor NeonSAN，二是 QingStor U10000。QingStor NeonSAN面向的是結(jié)構(gòu)化數(shù)據(jù)的高性能業(yè)務(wù)場景的需求，主要面向的場景是云盤、數(shù)據(jù)庫以及虛擬化存儲資源池場景的應(yīng)用。QingStor U10000是面向非結(jié)構(gòu)化海量數(shù)據(jù)存取和利用的業(yè)務(wù)場景的需求，主要包括各種影像數(shù)據(jù)、音視頻數(shù)據(jù)、數(shù)據(jù)湖、大數(shù)據(jù)、物聯(lián)網(wǎng)等場景。產(chǎn)品設(shè)計初衷就是幫助客戶更好實現(xiàn)海量數(shù)據(jù)的價值挖掘，產(chǎn)品的核心特點包括：同時提供對象、文件、大數(shù)據(jù)接口，不同協(xié)議之間實現(xiàn)數(shù)據(jù)無損訪問互通；單存儲桶支持 100 多億個對象，并且性能不會隨之下降。
“兩款產(chǎn)品有各自面向的專業(yè)場景，有各自專業(yè)的分工，我們沒有用一種架構(gòu)同時滿足結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)場景。因為從專業(yè)技術(shù)的視角來看，存儲架構(gòu)是沒有銀彈的，沒有哪一種架構(gòu)能同時做到既能滿足極致的性能設(shè)計要求，也能滿足海量數(shù)據(jù)吞吐、計算、并發(fā)利用的需求，這樣的結(jié)構(gòu)是不存在的。青云希望通過專業(yè)的存儲分工更好地服務(wù)專業(yè)的場景。”馮相東指出。
自研是青云存儲的第二大特點。青云存儲 QingStor 的兩款核心產(chǎn)品全都是自主設(shè)計的，沒有繼承任何開源的架構(gòu)。另外，自主研發(fā)使得技術(shù)百分百可控，不存在技術(shù)盲區(qū)。
值得一提的是，QingStor U10000這款產(chǎn)品是青云在多年存儲技術(shù)積累基礎(chǔ)上的一次產(chǎn)品全面升級。其繼承了之前青云對象存儲、文件存儲的所有能力，并且在多個維度上實現(xiàn)了產(chǎn)品力的增強(qiáng)和迭代（青云存儲之前主要包括QingStor塊存儲 NeonSAN、QingStor對象存儲、QingStor文件存儲）。因此，QingStor U10000其實并不是一款全新的產(chǎn)品，而是青云整個存儲產(chǎn)品線針對非結(jié)構(gòu)化數(shù)據(jù)，基于對象、文件存儲上的一次產(chǎn)品全面升級。
“QingStor U10000的定位是面向海量非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一存儲平臺，幫助客戶把數(shù)據(jù)存得穩(wěn)、算得快、管得好。QingStor U10000相比于之前的QingStor對象存儲和文件存儲，除了產(chǎn)品力的全面繼承，在一些主要領(lǐng)域?qū)崿F(xiàn)了明顯的提升，例如實現(xiàn)數(shù)據(jù)協(xié)議的互通，功能和性能得到了增強(qiáng)，強(qiáng)化了與算力平臺的對接等。”馮相東強(qiáng)調(diào)。
據(jù)介紹，QingStor U10000具備支撐海量數(shù)據(jù)存儲的能力，同時保證提供卓越的性能。QingStor U10000在保證線性擴(kuò)展和高性價比EC集群的基礎(chǔ)上，還能為通用場景，包括海量小文件場景提供卓越的I/O性能。比如，單桶單目錄能支持百億級小文件存儲，并且能做到性能不衰減。在技術(shù)層面，QingStor U10000采用比較流行的技術(shù)語言——Rust語言，給予存儲性能安全方面更優(yōu)的保障。
在多協(xié)議無損互通方面，QingStor U10000在技術(shù)層面提供了統(tǒng)一的索引架構(gòu)，并且基于統(tǒng)一的索引架構(gòu)提供多種層次的能力。這就是說，基于對象接口存進(jìn)來的數(shù)據(jù)，基于NFS/SMB存進(jìn)來的數(shù)據(jù)，或者通過HDFS大數(shù)據(jù)專用協(xié)議存進(jìn)來的數(shù)據(jù)，QingStor U10000都是基于統(tǒng)一的索引架構(gòu)提供這些數(shù)據(jù)的元數(shù)據(jù)管理。另外還提供了多協(xié)議存儲接口供選擇，而協(xié)議互通也讓數(shù)據(jù)分析更為高效。
在算力的無縫對接方面，得益于多年的積累，QingStor U10000具備豐富的數(shù)據(jù)處理的功能特性，能夠提供一系列完善的API、SDK，可以輕松地對接大數(shù)據(jù)平臺、數(shù)據(jù)處理的框架和服務(wù)，實現(xiàn)數(shù)據(jù)和算力的高效結(jié)合。
最后，數(shù)據(jù)安全也不容忽視，QingStor U10000通過元數(shù)據(jù)和存儲數(shù)據(jù)的分層設(shè)計、多重訪問安全機(jī)制、智能預(yù)警機(jī)制、功能服務(wù)的運維監(jiān)控平臺等多個維度保障數(shù)據(jù)安全。
