一、車紛享數據中心
車紛享的數據來自于車載終端上傳的數據報文,首先經過系統平臺的網關,然后借助規則引擎對數據報文進行解析拆分成有意義的數據項,以數據記錄的方式放入消息隊列,消息隊列采用了阿里的MQ,消息隊列的消費程序,會將消費到的數據分別存入redis以及HBase,其中Redis是用來提供車輛實時狀態的查詢,HBase提供車輛歷史數據的查詢,為了對歷史數據進行災備處理,使用了阿里云的OSS存儲,將備份數據日志文件按照時間分區存儲至OSS。


專欄
Hadoop v3.1大數據技術快速入門
作者:軟件架構
19.8幣
43人已購
查看
二、數據處理流程
以網約車管理平臺為例,主要數據來源為車況數據和訂單數據,進入Kafka后,建立2個消費組(Consumer Group),分別存儲進HBase數據庫和進入Spark Streaming流式計算引擎,主要用來為運營部門優化網點,車輛分流,監控部門的風控管理和商業BI相關的離線分析提供數據支撐。


專欄
Kafka v2.3 快速入門與實踐
作者:軟件架構
29.6幣
61人已購
查看
三、使用感受
現在車紛享的車聯網數據平臺已遷入阿里云HBase團隊已經半年多了,平均日寫入數據幾十G,到現在還沒出現數據服務器的嚴重故障問題,總體比較穩定,大大降低了運營管理成本。

原文鏈接:
車紛享:基于阿里云HBase構建車聯網平臺實踐
https://developer.aliyun.com/article/563203