中國太平保險集團有限責任公司

挑戰

開門紅大屏，預計峰值10W消息/秒，數據量大，實時性要求高，原有基于Oracle的方案存在以下不足：

- 延遲大，無法滿足實時性要求

- 存儲過程的并發計算限制

- 對Oracle核心庫資源爭用

- 系統缺乏水平擴展性

方案

利用MongoDB加SparkStreaming的高速流式數據處理架構：

- 業務數據改造寫入MQ；

- Spark與MongoDB雙向讀寫，統計排名寫入MongoDB。

效果

實時性：數據刷新從4分鐘減少到2秒。

擴展性：MongoDB和Spark都是水平橫向擴展的架構，簡單添加節點即可擴展集群的整理處理能力。

簡化架構：不再依賴觸發器、存儲過程和數據復制軟件這些復雜的數據處理機制。降低了核心Oracle數據庫的壓力，降低平臺的維護復雜度。