在人工智能與大數(shù)據(jù)融合發(fā)展的浪潮中,數(shù)星智能公司憑借其構建在亞馬遜云科技平臺上的數(shù)據(jù)智能平臺,成為推動企業(yè)數(shù)字化轉型的重要力量。該平臺集成了賽博數(shù)字引擎(SAPARINE)、賽博數(shù)據(jù)平臺(SUBDAY)和賽博智能平臺(SAIBOT AI)三大核心產(chǎn)品,為企業(yè)級客戶提供了一站式AI原生開源開放的服務。
數(shù)星智能的賽博數(shù)字引擎,作為一款彈性伸縮且與開源完全兼容的大數(shù)據(jù)平臺底座服務,充分利用了亞馬遜云科技的EC2、ECR、EKS、RDS、EFS等基礎設施資源。它基于Amazon S3實現(xiàn)統(tǒng)一數(shù)據(jù)存儲,通過Amazon Glue管理元數(shù)據(jù),并在Amazon EKS上構建原生大數(shù)據(jù)集群,支持Spark、Flink等開源大數(shù)據(jù)引擎,以及EMR、Redshift等亞馬遜云科技官方大數(shù)據(jù)產(chǎn)品,同時還兼容第三方大數(shù)據(jù)引擎,滿足了客戶多樣化的需求。
賽博數(shù)據(jù)平臺則專注于為企業(yè)提供數(shù)據(jù)倉庫、數(shù)據(jù)湖及湖倉一體等不同架構下的一站式數(shù)據(jù)開發(fā)與治理服務。通過數(shù)據(jù)集成、開發(fā)、監(jiān)控、元數(shù)據(jù)管理、質量管理、安全、資產(chǎn)管理和服務等一系列功能,該平臺極大地提升了企業(yè)的數(shù)據(jù)生產(chǎn)力。
位于產(chǎn)品架構頂層的賽博智能平臺,則致力于為企業(yè)及客戶提供機器學習、大模型服務和AI應用開發(fā)平臺。該平臺支持代理構建、企業(yè)知識庫構建等能力,加速了AI應用的開發(fā)和落地。
數(shù)星智能在AI與數(shù)據(jù)平臺的雙向賦能方面,展現(xiàn)了顯著的創(chuàng)新能力。一方面,SUBDAY產(chǎn)品提供了多模態(tài)數(shù)據(jù)管理能力,涵蓋非結構化數(shù)據(jù)的全生命周期管理,滿足了AI應用開發(fā)對多樣化數(shù)據(jù)的需求。另一方面,數(shù)星智能開發(fā)了DATA AGENT智能體,通過自然語言處理技術,實現(xiàn)了數(shù)據(jù)分析任務的自動化和智能化,極大地提高了大數(shù)據(jù)開發(fā)的效率。
數(shù)星智能在亞馬遜云科技平臺上還實施了全面的成本優(yōu)化策略。在存儲層,采用冷熱分離技術,降低了存儲成本;在計算層,使用性價比更高的實例類型,結合Amazon Auto Scaling和自研智能調優(yōu)工具,實現(xiàn)了資源的彈性伸縮和高效利用;在平臺層和應用層,采用Pod級別的彈性伸縮,減少了微服務資源的消耗。這些措施共同作用下,數(shù)星智能為客戶在數(shù)據(jù)平臺層節(jié)省了30%-50%的服務資源成本,計算層節(jié)省了20%-30%的計算資源成本,存儲層節(jié)省了60%-80%的存儲成本。
數(shù)星智能的整個產(chǎn)品線完全原生構建在亞馬遜云科技平臺上,并已上架亞馬遜云科技云市場,服務于電商、零售、游戲等多個行業(yè)的數(shù)十家國際化企業(yè)客戶。通過SAPARINE和SUBDAY兩款核心產(chǎn)品的組合,數(shù)星智能為客戶提供了原生一體化的大數(shù)據(jù)平臺,實現(xiàn)了從數(shù)據(jù)集成到存儲、計算、開發(fā)、治理、服務的端到端全生命周期一站式服務能力。
在演講現(xiàn)場,數(shù)星智能的負責人詳細闡述了公司在數(shù)據(jù)智能領域的探索和實踐。他提到,數(shù)據(jù)平臺和AI代理之間存在相互賦能的關系,這種“Data for AI”和“AI for Data”的理念,引領了服務于大模型時代、構建和交付數(shù)據(jù)應用的新模式。該模式通過提供多模態(tài)數(shù)據(jù)管理能力的數(shù)據(jù)基礎設施,并結合不同類型的數(shù)據(jù)應用代理,實現(xiàn)了大數(shù)據(jù)開發(fā)和治理流程的智能化重塑。
負責人還分享了數(shù)星智能在亞馬遜云科技平臺上實施的成本優(yōu)化具體措施。包括在部署形態(tài)上,提供兩種模式以滿足不同客戶的需求;在存儲層,采用對象存儲和冷熱分離技術降低存儲成本;在計算層,使用性價比更高的實例類型,并結合Amazon Auto Scaling和自研智能調優(yōu)工具實現(xiàn)資源的彈性伸縮和高效利用;在平臺層和應用層,采用Pod級別的彈性伸縮降低微服務資源消耗。
隨著人工智能技術的不斷發(fā)展和普及,構建多模態(tài)數(shù)據(jù)管理基礎設施和開發(fā)智能數(shù)據(jù)應用已成為企業(yè)數(shù)字化轉型的重要趨勢。數(shù)星智能在亞馬遜云科技平臺上的實踐,不僅展示了其在數(shù)據(jù)智能領域的創(chuàng)新能力,也為企業(yè)提供了一種新的數(shù)據(jù)智能交付模式,助力企業(yè)在AI時代的競爭中脫穎而出。