在數字經濟浪潮席卷全球的今天,數據已成為金融行業發展的核心驅動力。齊魯銀行立足金融科技前沿,成功打造《基于湖倉一體技術的金融數據底座及應用服務體系建設項目》,該項目不僅榮獲工信部2024信息技術創新應用方案典型案例、第十五屆金融科技創新獎等多項獎項,更通過技術創新與應用落地,為同業數字化轉型提供可復制的“實戰樣本”。
破局傳統數據架構
湖倉一體技術的應運而生
在金融服務加速邁向“線上化、數據化、智能化”的當下,傳統數據倉庫與大數據平臺“雙庫分立”的模式,逐漸暴露出諸多問題:處理海量交易數據時,性能跟不上;技術復雜,導致開發效率低;數據融合難,阻礙業務創新。
齊魯銀行精準抓住行業痛點,引入湖倉一體技術,打造了全新的金融數據中臺,以數據湖和數據倉庫為核心支撐,通過數據應用平臺,提供數據交換、開發、管理等一站式服務。
針對客戶標簽、指標分析、合規審計等實際業務需求,在數據倉庫基礎上搭建了專項數據集市,讓數據按主題分類存儲,調用起來更加便捷。平臺提供的數據服務經過標準化處理后,統一上架到數據超市。下游用戶通過數據門戶,就能輕松訪問數據超市。
本項目還構建了包含標簽、指標、智慧經營分析在內的應用服務體系,為金融服務帶來更高的效率和更多的可能。
六大創新點亮技術內核
從架構革新到價值創造
湖倉一體架構創新。數據湖對行內外結構化、非結構化的多模態數據進行低成本存儲;數據倉庫對整合后的數據進行主題化建模與深度加工。通過湖倉一體架構創新,深度融合兩者優勢,實現數據與計算資源的自由流動,存儲成本直降50%,計算任務平均處理速度提升70%。
技術融合與工具鏈協同。本項目實現數據湖與數據倉庫在存儲、計算、應用接口的全鏈路貫通,數據應用平臺提供的數據交換、開發、調度監控等功能,支持開發者在同一平臺上完成數據相關的全流程操作。以往需要5天完成的業務報表,現在6小時即可生成。
批流數據融合。以往,歷史批量數據和交易、行為等實時數據互相隔離、單獨計算,現在通過構建統一研發計算平臺,實現批流數據融合,將數據處理效率由小時級提升至分鐘級。以風險監控為例,過去發現異常交易,風控人員翻記錄、查評分得折騰1-2小時;如今,瞬間把新交易和歷史數據聯動分析,1分鐘內就能判斷是不是欺詐,直接決定要不要攔住交易。
主動式數據治理。依托本項目的數據管理功能,構建起一套覆蓋數據設計、開發、發版等全過程的標準化管控體系。通過預設數據標準規則與質量校驗機制,對各環節數據進行實時監測,確保數據在全鏈路流轉中符合統一規范,從而提升數據質量。2024年在數據設計階段主動攔截20余萬條未貫標字段,全鏈路治理攔截問題數據218萬條,新建系統數據落標率從70%提升至90%。
數據服務體系創新?;诒卷椖拷ㄔO的指標、標簽、報表等8大數據集市,圍繞“隔資源、少搬遷、統服務”三方面構建創新數據服務體系。通過“隔資源”為不同集市應用分配獨立計算資源,使關鍵數據服務與離線加工服務資源相互隔離,確保核心業務穩定。“少搬遷”利用數據虛擬化技術,在不搬遷數據的情況下動態聚合模型層和各集市數據,數據存儲降低50%,響應時效提升70%。“統服務”構建全局數據服務總線,封裝各集市數據能力,讓數據調用更安全、高效。
數據挖掘驅動業務創新。設立數據實驗區以數據挖掘驅動業務創新,實現數據申請審批、使用權限分配、脫敏規則定義等流程化管控,業務、分析人員通過數據門戶查詢數據資源清單,數據通過審批和脫敏后同步數據實驗區,供業務、分析人員開展自主研究和分析,為業務創新提供思路和依據。原來需要跨部門協調科技手工提數的時間由5天減少至6個小時,敏感數據分析使用不出域,減少手工數據提取后數據泄露風險。
價值釋放
經濟效益與社會效益的雙輪驅動
實現降本增收。成本管控方面,通過統一存儲和計算,數據存儲成本直降約50%,計算成本減少約65%。精準營銷領域,2024年智慧營銷模型成功吸引1.36萬名客戶,帶來13.59億元的銷售額,營銷成功率翻了近5倍。風控層面,構建340余個運營業務監測預警模型,2024年監測預警數據達90余萬筆。
金融生態的協同進化。項目不僅對內打破數據孤島,更對外拓展合作邊界。與山東省城商行聯盟合作中,通過平臺高效完成監管報送工作,同時助力聯盟成員行提升數據治理水平。這種“開放共享”的模式,正在構建更健康的金融生態系統。
人才培育的創新實踐。項目構建起“產學研用”一體化人才培養體系:與山東大學共建金融數學實驗室,每年為20余名學生提供實習機會;與華為等企業成立大數據聯合實驗室,完成13個課題研究;通過開展專項培訓,2024年培養510余名復合型金融科技人才,為行業發展注入人才“活水”。
面向未來,技術創新腳步從未停歇,面對人工智能與金融深度融合的趨勢,齊魯銀行將繼續以“筑基-創新-賦能-發展”的戰略發展路徑,推進“數據驅動+AI賦能”雙輪模式,提升平臺智能化水平;在數據安全領域,構建全生命周期防護體系,應對日益嚴格的監管要求;人才建設方面,通過“內部培養+外部引進”雙軌制,打造更強大的復合型人才梯隊,以數智之力譜寫齊魯銀行高質量發展新篇章?。–IS)