隨著數字化轉型在各行各業深入推進,“數據即資產”成為企業共識,數據價值挖掘成為企業關注的重點。金融機構作為數據密集型行業,其數據應用正沿著從記錄到統計、從統計到分析、從分析到預測、從預測到決策智能的路徑快速發展。金融機構在數字化轉型過程中,呈現出一切業務數據化、一切數據業務化的趨勢,即整個數智化過程需要將數據要素作為生產資料,打造基于數據的“挖掘-治理-應用”一體化技術服務能力。

復雜信息、海量數據向我們展示了聯系的復雜性和多樣性,碎片化的字符之間相互連結、影響、作用和轉化,能衍生出各種維度的數據指標,最終引導我們探究出隱藏在數字背后事物的本質和價值。在此背景下,傳統的離線批處理和通用的實時流處理技術均無法滿足大數據、高并發、高吞吐、低延時的要求,業務事件的復雜性、動態事件的時序性加劇了數據挖掘和計算挑戰。金融機構更加依賴“快、準、穩”的實時數據處理及指標計算能力保障。

為支撐并滿足金融機構未來的業務發展趨勢,同盾科技正式推出基于超融合計算理念的一體化指標平臺——極溯V4.0。該平臺旨在成為決策智能一體化信息中樞,支撐實時指標計算、離線批量決策、圖指標集成應用以及面向人工智能的特征研發等全場景應用。

(資料圖)

傳統指標計算的挑戰

近年來,銀行不斷深入數字化發展的同時,數據量的爆發式增長也帶來了新挑戰,每天上千萬筆交易量、千億的指標計算量、PB級數據規模,但留給交易系統的決策響應時間往往只有幾毫秒。如何最快時間計算模型的結果,反饋精準的結果,并且在整個過程中保持系統的穩定性,成為眾多銀行持續探索的方向。

傳統的指標計算方法底層邏輯一般是采用實時采集、異步計算的方式,無法實現快、準、穩的統一,存在以下幾大痛點:

· 分散無序,管理成本高:指標分散在各業務系統,研發人員和業務人員割裂明顯,無沉淀、難復用、效率低,造成資源浪費和低效率。

· 研發周期長,業務響應慢:指標開發涉及多個部門及人員,從指標設計到指標上線,整個指標周期長,無法快速響應業務需求。

· 大規模計算性能低:當碰到大數據量,熱點客群,多維度,長時間片等情況時,指標計算性能低。

· 缺乏運營和監控:缺乏對指標持續的質量監控和效果分析,難以發現指標異常情況,避免數據腐化。

打造快、準、穩的一體化指標平臺

針對銀行業務發展需求及傳統指標平臺的痛點,同盾科技打造了基于超融合指標計算理念的一體化產品“極溯V4.0”,圍繞指標對接、指標管理、指標計算、指標服務、指標運營五個維度,攻克了冷熱數據融合、存算一體化、流批一體化、跨領域指標融合等難題,滿足業務全場景多模式的決策智能應用。

首先,極溯將海量的原始數據高效加工成指標資產,匯聚成信息中樞,形成一個統一的平臺;其次,通過指標全生命管理一體化平臺,提供指標管理、計算、服務和運營能力,覆蓋指標管理全周期,解決指標管理無序,口徑不統一,計算性能慢、上線周期長等問題;通過極溯指標平臺的搭建,支撐實時決策、離線決策、決策調優、模型訓練、模型預測等場景,覆蓋交易反欺詐、信貸全生命周期等業務流程。

依托高性能的實時指標計算引擎以及一體化融合計算引擎,極溯4.0實現了指標計算“快、準、穩”的統一,能夠為金融機構提供高性能、高并發、低時延指標計算和服務,有效支撐包括實時事件決策、離線批量決策、策略仿真調優等業務場景。

· 快:實時指標支持超高并發量的請求,可達百萬級/秒實時指標計算,平均延時10ms內;

· 準:指標結果精準有效,支持指標初始化、指標回溯計算、指標驗證等;

· 穩:分布式架構確保指標服務高穩定性,接口99.99%可用性。

貼合并高效響應業務

經過6年多時間的持續研發和打磨,同盾極溯產品性能已達到行業頂尖水平,并已服務超200家金融機構,支撐智能決策多場景應用。

【案例一:某國有大行全行級指標中心建設】

項目背景:該行決策引擎依賴的指標分布于不同的數據中心,且數量較多。實時指標計算在決策引擎,離線指標計算在數據中臺、各地研發中心的預計算完成的離線指標、以及三方外部數據的相關指標等,需要通過指標平臺實現統一管理。

項目效果:同盾科技通過與該行共建指標中心,對交易數據進行實時加工計算輸出指標策略結果,實現交易場景風險全覆蓋。在三方快捷支付風控場景,實現全渠道日均2億的實時指標計算,且保證決策平均響應時間11ms以內;在穩定性方面,15ms內響應達到99.995%,降低原來因性能問題造成的交易失敗數量94%。

【案例二:某大型股份制銀行指標計算平臺建設】

項目背景:隨著該行零售交易業務的不斷發展,其反欺詐系統監測范圍需要延展,將聚合支付、電子支付、網貸業務等納入實時反欺詐范圍。而該行原決策引擎無法滿足業務數據全部接入后指標快速計算處理的底層支撐能力要求。

項目效果:同盾科技通過極溯平臺對該行原有指標計算平臺進行了升級改造,平臺升級后,日均交易量達到3000萬、系統配置指標超1000條的情況下,系統平均響應時間降低至20ms,大大的提升了指標計算時效;原有系統平均響應超時率5%,上線后系統平均超時率降低至0.01%以下;此外,平臺升級后還較原系統節省了約50%的服務器硬件成本。

以極溯4.0為一個新的起點,同盾科技未來還將圍繞指標知識資產體系、指標運營等維度繼續投入研發,同時將極溯-指標平臺與天策-決策引擎等產品深度結合,形成從線上實時決策分析、離線模型訓練部署到智能模型應用的全面配套支持,讓數據形成資產、讓數據驅動決策、讓決策驅動業務流程。