基于在混合云環境下的多年耕耘,云杉網絡自主研發的云監控服務平臺DeepFlow已在金融、電信、能源等行業中的數十家世界五百強客戶處得到了廣泛的應用。我們宣布將DeepFlow核心的可觀測性數據引擎MetaFlow正式開源(5月11日揭曉),我們希望將更好的可觀測性能力、自動追蹤和自動標簽能力開放到整個行業,幫助企業客戶改進云原生運維工作的運行效率、穩定性和計算成本。
MetaFlow是什么?
MetaFlow是一個高度自動化的可觀測性平臺,是為云原生應用開發者建設可觀測性而量身打造的全棧、全鏈路、高性能數據引擎。MetaFlow的AutoTracing能力創新的使用eBPF實現自動化的分布式鏈路追蹤,并自動關聯OpenTelemetry實現真正的云原生環境全棧、全鏈路追蹤。MetaFlow的AutoTagging機制能夠自動為所有觀測數據注入豐富的云原生資源屬性、API屬性標簽,打破數據孤島,釋放數據的下鉆切分能力。
MetaFlow擁有開放的架構,基于WASM的可編程應用協議解析能力、可擴展的觀測數據源、插件式的分析數據庫接口、統一的SQL查詢接口,讓使用者可將其快速融入自己的可觀測性平臺中。MetaFlow易于維護,僅由Agent、Server兩個組件構成,無需依賴任何其他組件即可實現水平擴展與負載均衡。MetaFlow追求極低的資源消耗,使用Rust實現采集器,通過SmartEncoding實現10倍性能的數據標簽注入。
為什么要開源?
建設可觀測性已經成為云原生應用開發者的必要工作,然而現有的解決方案正悄無聲息的消耗著開發者越來越多的時間。開發者需要考慮如何埋點插碼,如何傳遞追蹤上下文,如何關聯不同類型的數據,如何控制數據的猖獗增長,如何避免高基標簽,如何維護越來越復雜的平臺,這些工作嚴重擠占了業務開發工作的時間。
MetaFlow擁抱開源社區,設計了良好的數據源、存儲、可視化擴展能力。通過MetaFlow,我們希望讓觀測更自動,讓開發者更自由。
發布內容:MetaFlow:開源的高度自動化可觀測性平臺
發布方式:線上多平臺直播(云杉網絡視頻號、開源中國視頻號、云原生社區視頻號、開源社KAIYUANSHE視頻號、示說直播平臺)
發布時間:2022年5月11日(周三) 晚20:00~21:30
演講主題:
《MetaFlow:開源的高度自動化可觀測性平臺》—— 云杉網絡 研發VP 向陽
演講內容:
云原生應用開發者獲取可觀測性的沉重負擔
打造可觀測性數據平臺所要具備的基礎能力
MetaFlow開源可觀測性平臺的軟件架構
基于eBPF的高度自動化可觀測性能力
全棧、全鏈路的可觀測性建設落地實踐
開放的 MetaFlow,與開發者共拓更多應用場景
聽眾受益
“讓觀測更自動,讓開發者更自由”,通過此次分享你能了解我們如何從細節的軟件架構設計中體現對這一使命的追求,而且也能看到eBPF、AutoTracing、AutoTagging、SmartEncoding等技術在可觀測性領域極富創新的落地實踐。