剛剛獲悉,全球最大的開源軟件基金會Apache軟件基金會正式宣布,Apache InLong成為成功從Apache孵化器畢業成為社區頂級項目,這也是Apache社區首個一站式大數據集成頂級項目。這個最初由騰訊捐獻給Apache社區的一站式海量數據集成框架,可以為大數據開發者提供百萬億級數據流高性能處理能力,以及千億級數據流高可靠服務。
這是繼騰訊開源項目 Angel 從 LF AI 基金會畢業成為世界頂級的 AI 開源項目之后,騰訊大數據團隊在開源領域創造的又一里程碑。作為國內國內大數據領域開源最全面的公司,Apache InLong畢業成為Apache頂級項目,將進一步鞏固騰訊在大數據領域的領先地位。
“我們很高興看到InLong踐行Apache Way,并以頂級項目的身份從Apache孵化器畢業,”騰訊副總裁蔣杰表示:“騰訊致力于構建開源生態系統,讓全球開發者能夠平等便捷地利用開源代碼。作為騰訊最成功的開源項目之一,InLong廣泛應用于騰訊內部海量業務以及外部的金融、政府等關鍵業務。未來,騰訊將持續為社區貢獻我們的力量,攜手全球開發者共同構建繁榮的大數據生態系統。”
據悉,Apache軟件基金會對所有的 Apache 項目都要嚴格篩選并經過孵化器孵化,滿足一系列質量要求之后才可畢業。從孵化器里畢業的頂級項目,表明該項目的社區和產品已根據ASF的精英流程和原則得到良好管理。
InLong中文名“應龍”是中國神話中引流入海的神獸,意寓InLong在大數據社區生態中的價值:大數據接入集成。
InLong以騰訊內部使用的TDBank為基礎,依托萬億級的數據攝取和處理能力,將數據采集、聚合、存儲、排序數據處理的全流程整合在一起。不僅提供自動、安全、可靠和高性能的數據傳輸能力,還支持基于流式的數據分析、建模和應用,幫助企業簡化數據處理的過程。
比如,InLong 作為一個基于SaaS 的服務平臺,用戶可以選擇主題的數據發布和訂閱,來輕松快速地報告、傳輸和分發數據,大幅降低了使用門檻。同時InLong可以為100萬億級數據流提供高性能處理能力,為1000億級數據流提供高可靠服務,保障用戶享受到穩定可靠的在線服務。
InLong支持多種數據訪問方式,包括不同類型的消息隊列服務集成和實時數據提取、轉換、加載以及基于規則的排序功能;在服務方面,InLong為用戶提供統一的系統監控和告警服務。通過細粒度的指標來促進數據可視化,用戶可以在統一的數據度量平臺中直接查看隊列的運行狀態,大大提高了業務的主動性。
實際上,在騰訊內部InLong項目原名TubeMQ,主要專注于高性能、低成本的消息隊列服務,并長期服務微信支付、騰訊視頻、廣點通等產品。為了進一步釋放TubeMQ周邊的生態能力,騰訊將項目升級為InLong,專注打造一站式海量數據集成框架。該項目于2019年11月進入 Apache 孵化器,2022 年6月畢業成為頂級項目。
目前, Apache InLong已經發布第12個版本,騰訊大數據 InLong 團隊和社區開發者一起,在孵化期間不斷更新和完善其功能,比如重構InLong Sort模塊、新增數據節點、優化初始化流程等,為社區和企業提供更多元化的開放解決方案。與此同時,InLong正在廣泛應用于廣告、支付、社交、游戲、人工智能等各個行業領域,為多領域客戶提供高效化便捷化服務。
“InLong的畢業,標志著一個開放、多元、成熟的開源社區的成功建立。在未來的征程中,項目將繼續踐行“Apache Way”,通過社區的共同努力,助力更多企業數字化轉型。”Apache InLong 副總裁 Charles Zhang 說。
“恭喜 Apache InLong 作為 ASF TLP 畢業!” NextArch 基金會 TOC 的 Mark Shan 說。 “InLong降低大數據使用門檻,期待InLong為社區和企業提供更多元化的開放解決方案。”
騰訊作為國內最早擁抱開源的科技公司之一,截至目前在 Github 上共發布了超過 160 個開源項目,獲得了超過 40 萬名開發者的關注和 Star,穩居全球開源企業貢獻榜前十。目前,騰訊已經是 Apache 基金會、linux 基金會、CNCF、開放原子基金會等國際頂級開源基金會的重要成員,并向開源基金會捐贈了Angel、TubeMQ、TKE Stack、Tencentos Tiny 等項目。在Apache基金會的大數據項目上,騰訊已經為主流的Hadoop、Spark、Flink等項目貢獻了大量的特性和patch。在內部開源協同和自研上云戰略驅動下,騰訊將會通過騰訊云,開放更多的大數據以及AI領域的產品化能力,為更多開發者提供低成本、高性能的開發工具。