“數(shù)據(jù)中臺(tái)”是互聯(lián)網(wǎng)界的網(wǎng)紅概念,有人一度認(rèn)為它是改變互聯(lián)網(wǎng)格局的產(chǎn)品,也有人認(rèn)為是一種無(wú)奈的妥協(xié)。但不可否認(rèn)的是,在大數(shù)據(jù)時(shí)代到來(lái)之時(shí),“數(shù)據(jù)中臺(tái)”標(biāo)志著一種對(duì)數(shù)據(jù)最高姿態(tài)的重視。
概念提出6年后的今天,同樣的問(wèn)題也擺在了數(shù)據(jù)采集與洞察領(lǐng)域:未來(lái)的智慧運(yùn)維時(shí)代,是否仍有數(shù)據(jù)中臺(tái)的一席之地?
“數(shù)據(jù)中臺(tái)”的迷思:DT時(shí)代是否需要它?
2016年,阿里率先提出“數(shù)據(jù)中臺(tái)”的概念。
隨著科技高速發(fā)展,產(chǎn)業(yè)IT化已經(jīng)朝向DT(Data technology)化發(fā)展。數(shù)據(jù)業(yè)務(wù)場(chǎng)景的增加和數(shù)據(jù)量的爆炸式增長(zhǎng),都標(biāo)志數(shù)據(jù)被擺在史無(wú)前例的重要位置。企業(yè)發(fā)現(xiàn),在DT時(shí)代,數(shù)據(jù)變成了開(kāi)疆拓土的彈藥。然而,彼之蜜糖吾之砒霜。數(shù)據(jù)也成為很多企業(yè)的負(fù)荷,因?yàn)檫@些“彈藥”,是不同“口徑”的。為快速響應(yīng)業(yè)務(wù)的需求,不同業(yè)務(wù)線往往會(huì)自己扯團(tuán)隊(duì)干起開(kāi)發(fā),或者進(jìn)行設(shè)備迭代。業(yè)務(wù)場(chǎng)景的數(shù)字化帶來(lái)數(shù)據(jù)的復(fù)雜化,數(shù)據(jù)的復(fù)雜化導(dǎo)致業(yè)務(wù)線之間數(shù)據(jù)很難共享互通,導(dǎo)致了煙囪式的數(shù)據(jù)孤島。企業(yè)各業(yè)務(wù)線之間的數(shù)據(jù)呈割裂態(tài)勢(shì),不利于上層的介入決策不說(shuō),盤算投入產(chǎn)出比的時(shí)候更讓人不忍直視。這一點(diǎn)在數(shù)字化較為激進(jìn)的金融領(lǐng)域尤其明顯。
一只腳邁進(jìn)DT時(shí)代的產(chǎn)業(yè)現(xiàn)狀大體如此,數(shù)據(jù)中臺(tái)的概念也隨之誕生。數(shù)據(jù)中臺(tái)的核心是:完成一線數(shù)據(jù)的匯聚處理避免數(shù)據(jù)的重復(fù)加工,通過(guò)數(shù)據(jù)服務(wù)化,提高數(shù)據(jù)的共享能力,為企業(yè)沉淀數(shù)據(jù)價(jià)值,賦能應(yīng)用。經(jīng)過(guò)數(shù)據(jù)中臺(tái)的加工,后端能夠拿到便于批量處理的數(shù)據(jù),對(duì)前臺(tái)業(yè)務(wù)有更好的指導(dǎo)作用。聽(tīng)起來(lái)似乎較為理想,但這種模式能持續(xù)多久,業(yè)界也各執(zhí)一詞。
“數(shù)據(jù)孤島”的存在,已經(jīng)成為了一個(gè)普遍共識(shí)。數(shù)據(jù)中臺(tái)概念的提出,標(biāo)志著產(chǎn)業(yè)正視數(shù)據(jù)的底層價(jià)值,并終于著手探索“數(shù)據(jù)孤島”的應(yīng)對(duì)辦法。
反對(duì)者認(rèn)為,數(shù)據(jù)中臺(tái)的辦法,相當(dāng)于派一艘船在島與島之間送信,用極其原始的方法解決端到端的信息差,是用預(yù)處理的手段解決掩飾背后的數(shù)據(jù)庫(kù)無(wú)法應(yīng)對(duì)復(fù)雜場(chǎng)景和大量讀寫(xiě)需求的權(quán)宜之計(jì),僅僅屬于最低限度的補(bǔ)救措施,注定無(wú)法長(zhǎng)期存續(xù)。
從目前的情況看,無(wú)論“數(shù)據(jù)中臺(tái)”模式是否長(zhǎng)期有效,在IT領(lǐng)域,短期內(nèi)還是解了近渴,IT化的企業(yè)得到了初步的數(shù)據(jù)價(jià)值沉淀。
在數(shù)據(jù)采集領(lǐng)域中臺(tái)模式并無(wú)根本作用
在數(shù)據(jù)采集與洞察領(lǐng)域,情況便與IT圈大相徑庭。部分正在數(shù)字化的企業(yè)為了解決數(shù)據(jù)采集中的數(shù)據(jù)孤島,跟風(fēng)搭建數(shù)據(jù)中臺(tái),殊不知這樣弊大于利。
在IT領(lǐng)域,即便已經(jīng)出現(xiàn)數(shù)據(jù)復(fù)雜化的趨勢(shì);隨著業(yè)務(wù)拓展數(shù)據(jù)的場(chǎng)景和類型,相對(duì)于企業(yè)數(shù)字化的采集場(chǎng)景,也是相對(duì)可控的。這種可控性,使得按照IT的視角,數(shù)據(jù)可以按照商品、交易、用戶、供應(yīng)鏈等線索劃分成為不同的主題域,中臺(tái)足以應(yīng)付,也能夠沿用底層的傳統(tǒng)數(shù)據(jù)庫(kù)進(jìn)行存儲(chǔ)和處理。
在企業(yè)數(shù)字化采集場(chǎng)景中,最大的變量是過(guò)程,而不是一個(gè)個(gè)已經(jīng)形成結(jié)果的數(shù)據(jù)。產(chǎn)業(yè)升級(jí)撞上信創(chuàng)浪潮,涌入各產(chǎn)業(yè)的智能終端指數(shù)級(jí)增長(zhǎng),讓設(shè)備的洞察與數(shù)據(jù)的采集面臨前所未有的挑戰(zhàn)。這些終端,每一個(gè)都是一個(gè)觀察者和反饋者,它們彼此之間采用不同的數(shù)據(jù)范式,遵循不同的協(xié)議。
這就導(dǎo)致采集場(chǎng)景的數(shù)據(jù)孤島要更為嚴(yán)重。此外,企業(yè)需要擴(kuò)大業(yè)務(wù)規(guī)模的時(shí)候,自動(dòng)化的趨勢(shì)進(jìn)一步加強(qiáng),終端池隨之進(jìn)一步擴(kuò)大,其數(shù)據(jù)孤島的增長(zhǎng)速度遠(yuǎn)高于開(kāi)辟IT化業(yè)務(wù)線。如果按照數(shù)據(jù)中臺(tái)的做法,就必須不斷修改融合模型,很顯然這樣的做法杯水車薪。
不同于企業(yè)IT化,進(jìn)入DT時(shí)代后,后發(fā)進(jìn)行基礎(chǔ)設(shè)施數(shù)字化的企業(yè),其針對(duì)數(shù)據(jù)采集的需求基于機(jī)器而非人,這就決定了數(shù)據(jù)源是無(wú)法中心化的,分布式部署采集數(shù)據(jù)、云邊端一體的整體運(yùn)維架構(gòu)會(huì)是唯一的發(fā)展方向。
未經(jīng)處理的原始數(shù)據(jù)便于專家結(jié)合專業(yè)經(jīng)驗(yàn)進(jìn)行診斷處理,數(shù)據(jù)并不直接產(chǎn)生價(jià)值,卻是最可靠的避險(xiǎn)工具。數(shù)據(jù)孤島的產(chǎn)生也有這方面原因:設(shè)備的機(jī)器語(yǔ)言是最好的“脈象”,技術(shù)專家需要保持其原始性和各異性。數(shù)據(jù)中臺(tái)加工數(shù)據(jù),則相當(dāng)于讓專家“懸絲診脈”。
基礎(chǔ)設(shè)施的數(shù)據(jù)異常需要第一時(shí)間傳遞給決策者,加一層中臺(tái)實(shí)體,對(duì)于即時(shí)響應(yīng)、避免加入有數(shù)據(jù)風(fēng)險(xiǎn)的中間環(huán)節(jié)等需求來(lái)說(shuō),則是違背了奧卡姆剃刀原則(即“簡(jiǎn)單成就高效原理”)。
在數(shù)據(jù)采集領(lǐng)域,中臺(tái)的概念并無(wú)根本作用。最適合發(fā)展需求的運(yùn)維工具應(yīng)該是這樣:能夠洞察一切設(shè)備,聽(tīng)懂它們各自的數(shù)字“語(yǔ)言”,并如實(shí)傳遞給決策者。
不饞隔壁“數(shù)據(jù)中臺(tái)”智慧運(yùn)維工具已問(wèn)世
終端的生命周期較長(zhǎng),決定了在數(shù)據(jù)采集領(lǐng)域,數(shù)據(jù)孤島將長(zhǎng)期存在。現(xiàn)在都在升級(jí)智慧運(yùn)維,數(shù)據(jù)采集的智慧運(yùn)維應(yīng)該如何突破?解決的辦法,就唯有從底層下手。在數(shù)據(jù)采集領(lǐng)域,最大的問(wèn)題,就是設(shè)備數(shù)據(jù)的龐大和異構(gòu)化。
預(yù)見(jiàn)到數(shù)據(jù)在將來(lái)運(yùn)維中的復(fù)雜性和重要性,美信時(shí)代自主研發(fā)了Big River四合一超融合數(shù)據(jù)庫(kù)。與傳統(tǒng)數(shù)據(jù)庫(kù)存在難于以擴(kuò)展、數(shù)據(jù)在導(dǎo)入之前需要定義好模型的等限制不同,Big River數(shù)據(jù)庫(kù)集表狀數(shù)據(jù)庫(kù)、KV數(shù)據(jù)庫(kù)、時(shí)序數(shù)據(jù)庫(kù)、內(nèi)存數(shù)據(jù)庫(kù)于一體,兼容各類主流數(shù)據(jù)格式。基于Big River數(shù)據(jù)庫(kù),美信時(shí)代開(kāi)發(fā)了通用一體化數(shù)據(jù)采集與洞察平臺(tái)監(jiān)控易。得益于對(duì)各類數(shù)據(jù)的支持,監(jiān)控易具備了洞察一切智能終端的基礎(chǔ),并能快速適配一切設(shè)備和協(xié)議,完全支持各類設(shè)備的數(shù)據(jù)采集需求。Big River數(shù)據(jù)庫(kù)的獨(dú)特分布式架構(gòu),在云計(jì)算、物聯(lián)網(wǎng)為重點(diǎn)突破方向的今天顯然更具優(yōu)勢(shì),讓其高寫(xiě)入性能、高擴(kuò)展性、高可用性、高并發(fā)處理能力、海量數(shù)據(jù)存儲(chǔ)查詢特性甚至能在工業(yè)級(jí)別場(chǎng)景下的數(shù)據(jù)采集中游刃有余,讓監(jiān)控易具備低成本、快速適配一切設(shè)備和協(xié)議等獨(dú)到優(yōu)勢(shì),完全滿足信創(chuàng)國(guó)產(chǎn)化替代的需要。從“內(nèi)修一口氣”層面,監(jiān)控易已經(jīng)具備了打破數(shù)據(jù)采集領(lǐng)域端到端數(shù)據(jù)孤島的根基。
應(yīng)對(duì)產(chǎn)業(yè)數(shù)字化帶來(lái)產(chǎn)業(yè)規(guī)模和終端池的擴(kuò)張,監(jiān)控易也體現(xiàn)出“外練筋骨皮”的優(yōu)勢(shì)。依托國(guó)內(nèi)領(lǐng)先的云、邊、端SaaS架構(gòu)技術(shù),監(jiān)控易支持五級(jí)架構(gòu)運(yùn)維部署,便于企業(yè)進(jìn)行分布式數(shù)據(jù)采集。
打通了數(shù)據(jù)孤島僅僅是開(kāi)始,如何發(fā)揮數(shù)據(jù)的價(jià)值才是最終目的。在數(shù)據(jù)采集領(lǐng)域,數(shù)據(jù)孤島對(duì)人效的嚴(yán)重耗費(fèi)才是根本問(wèn)題,與采集層面的分布式部署不同,數(shù)據(jù)處理層面則需要最大程度的中心化——故障的快速定位才能便于專家經(jīng)驗(yàn)的落地。監(jiān)控易能快速識(shí)別網(wǎng)絡(luò)內(nèi)的設(shè)備并生成拓?fù)鋱D,何處告警一目了然,并實(shí)現(xiàn)短信、郵件、APP等多端精準(zhǔn)告警觸達(dá),極大節(jié)省了人力巡檢成本。
借助分布式架構(gòu)和數(shù)據(jù)可視化,監(jiān)控易曾在江蘇省高速公路監(jiān)控運(yùn)維平臺(tái)建設(shè)項(xiàng)目中,克服了基礎(chǔ)設(shè)施離散、終端數(shù)量龐大、設(shè)備種類復(fù)雜的重重挑戰(zhàn),總監(jiān)控納管設(shè)備達(dá)數(shù)萬(wàn)臺(tái),實(shí)現(xiàn)了該省的路網(wǎng)設(shè)施監(jiān)控一體化運(yùn)維,實(shí)現(xiàn)了“一屏盡覽全路網(wǎng)”的喜人成果,再一次驗(yàn)證了監(jiān)控易帶來(lái)的產(chǎn)業(yè)數(shù)字化擴(kuò)展能力。
憑借監(jiān)控易,數(shù)據(jù)的采集與設(shè)備洞察已經(jīng)不再是產(chǎn)業(yè)數(shù)字化的瓶頸。為了便于企業(yè)用戶進(jìn)行數(shù)字化拓展,監(jiān)控易還具備低代碼開(kāi)發(fā)能力,極大降低企業(yè)用戶的使用、培訓(xùn)門檻。低代碼是遠(yuǎn)超搭建中臺(tái)的賦能方式,這一點(diǎn)即便在IT領(lǐng)域也逐漸成為一種共識(shí)。
通過(guò)自研超融合數(shù)據(jù)庫(kù)、云-邊-端協(xié)同、低代碼開(kāi)發(fā)的領(lǐng)先產(chǎn)品優(yōu)勢(shì),監(jiān)控易目前廣泛應(yīng)用于政府、軍工、金融、電力、石油石化、交通、醫(yī)療等多個(gè)領(lǐng)域,納管設(shè)備總量超百萬(wàn)臺(tái)。
在數(shù)據(jù)采集與設(shè)備洞察賽道,也曾遭遇和IT領(lǐng)域類似的數(shù)據(jù)孤島問(wèn)題。其區(qū)別在于,IT領(lǐng)域?qū)?shù)據(jù)場(chǎng)景的挖掘啟動(dòng)更早而基礎(chǔ)設(shè)施數(shù)據(jù)庫(kù)的迭代進(jìn)度遲滯,從而導(dǎo)致需要引入數(shù)據(jù)中臺(tái)進(jìn)行緩沖;數(shù)據(jù)采集領(lǐng)域卻沒(méi)有這樣的窗口期,要一步邁向智慧運(yùn)維,只能從數(shù)據(jù)煙囪孤島浮現(xiàn)之初,就摒棄中臺(tái)思想,直接和數(shù)據(jù)對(duì)話,這才是唯一正確的路徑。