企業(yè)級(jí)監(jiān)管信息集中服務(wù)研究

時(shí)間:2022-11-30 02:47:58

導(dǎo)語(yǔ):企業(yè)級(jí)監(jiān)管信息集中服務(wù)研究一文來(lái)源于網(wǎng)友上傳,不代表本站觀點(diǎn),若需要原創(chuàng)文章可咨詢客服老師,歡迎參考。

企業(yè)級(jí)監(jiān)管信息集中服務(wù)研究

隨著金融自由化、金融創(chuàng)新的蓬勃發(fā)展,金融套利等行為也與日俱增。為了響應(yīng)國(guó)家去杠桿、補(bǔ)短板、防化風(fēng)險(xiǎn)、服務(wù)實(shí)體的政策,金融監(jiān)管的要求日趨嚴(yán)格。近年來(lái),人民銀行、銀保監(jiān)會(huì)等監(jiān)管部門對(duì)商業(yè)銀行的監(jiān)管要求也在不斷提高。為了滿足新形勢(shì)下的監(jiān)管報(bào)送要求,及時(shí)、準(zhǔn)確、全面地實(shí)現(xiàn)監(jiān)管統(tǒng)計(jì)報(bào)表數(shù)據(jù)的集中加工處理,提升監(jiān)管報(bào)送質(zhì)量,農(nóng)業(yè)銀行經(jīng)過(guò)不斷的探索和實(shí)踐,根據(jù)自身的整體戰(zhàn)略目標(biāo)和信息技術(shù)發(fā)展規(guī)劃,在廣泛汲取國(guó)內(nèi)外同業(yè)成功經(jīng)驗(yàn)的同時(shí),結(jié)合自身的資源現(xiàn)況,搭建了企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)。在大型商業(yè)銀行中率先實(shí)現(xiàn)了監(jiān)管報(bào)表全行集中,有效解決了監(jiān)管報(bào)告信息分散加工、資源投入高、數(shù)據(jù)不一致、數(shù)據(jù)準(zhǔn)確性不高及自動(dòng)化加工率和報(bào)送效率低等監(jiān)管信息報(bào)送領(lǐng)域存在的問(wèn)題。

一、企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)概括

企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)以大數(shù)據(jù)平臺(tái)為數(shù)據(jù)來(lái)源,提供一體化的報(bào)表配置、數(shù)據(jù)加工、填報(bào)、集團(tuán)并表、展現(xiàn)、監(jiān)測(cè)預(yù)警、分析報(bào)告、組裝報(bào)送等監(jiān)管報(bào)送全流程管理功能,全面支撐農(nóng)業(yè)銀行面向人民銀行、銀保監(jiān)會(huì)、各地銀監(jiān)局、統(tǒng)計(jì)局等外部監(jiān)管單位的監(jiān)管信息報(bào)送工作,陸續(xù)實(shí)現(xiàn)人民銀行“金融統(tǒng)計(jì)數(shù)據(jù)集中”工程、“標(biāo)準(zhǔn)化存貸款綜合抽樣統(tǒng)計(jì)監(jiān)測(cè)”“全球系統(tǒng)性重要銀行通用數(shù)據(jù)模板信息”“精準(zhǔn)扶貧貸款專項(xiàng)統(tǒng)計(jì)”、原銀監(jiān)會(huì)“1104工程”“新資本協(xié)議”“監(jiān)管標(biāo)準(zhǔn)化測(cè)試數(shù)據(jù)報(bào)送”及“流動(dòng)性覆蓋率信息披露”等監(jiān)管領(lǐng)域,法人、集團(tuán)各級(jí)報(bào)告信息的統(tǒng)一管理、集中加工、共享使用,確保各類監(jiān)管數(shù)據(jù)的“同源同規(guī)同質(zhì)”,實(shí)現(xiàn)監(jiān)管信息“一口出”。該系統(tǒng)通過(guò)采用集群式并行負(fù)載均衡處理、異步隊(duì)列處理、高效可擴(kuò)展的公式引擎、內(nèi)存計(jì)算、可視化配置方式等技術(shù),解決了監(jiān)管領(lǐng)域全行集中帶來(lái)的系統(tǒng)壓力,不僅實(shí)現(xiàn)了企業(yè)級(jí)監(jiān)管信息集中服務(wù),同時(shí)還釋放了大量原有生產(chǎn)設(shè)備及運(yùn)維資源。數(shù)據(jù)方面涵蓋了農(nóng)業(yè)銀行主要業(yè)務(wù)源系統(tǒng),通過(guò)確定各系統(tǒng)可信數(shù)據(jù)項(xiàng),將不同源系統(tǒng)信息拼接形成統(tǒng)一寬表數(shù)據(jù)源,使報(bào)表數(shù)據(jù)準(zhǔn)確性及自動(dòng)化率都得到大幅提升。此外,監(jiān)管報(bào)表填報(bào)方式轉(zhuǎn)變?yōu)椤翱傂屑屑庸?、逐?jí)審查確認(rèn)”的全新處理模式,有效減少各級(jí)統(tǒng)計(jì)崗位人員工作量和溝通填報(bào)成本,切實(shí)減輕基層負(fù)擔(dān),監(jiān)管報(bào)送效率整體顯著提升,促進(jìn)農(nóng)業(yè)銀行數(shù)據(jù)管理與服務(wù)工作轉(zhuǎn)型;通過(guò)該成果的應(yīng)用系統(tǒng)建設(shè),推進(jìn)了農(nóng)業(yè)銀行數(shù)據(jù)監(jiān)測(cè)和治理工作,通過(guò)基于數(shù)據(jù)檢驗(yàn)機(jī)制和血緣分析,支持報(bào)表數(shù)據(jù)到基礎(chǔ)數(shù)據(jù)的追溯,并定位報(bào)表缺口對(duì)應(yīng)的問(wèn)題明細(xì)數(shù)據(jù),從而有效推動(dòng)農(nóng)業(yè)銀行源頭數(shù)據(jù)的治理工作。

二、企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)的技術(shù)特點(diǎn)

1.安全高效的計(jì)算框架采用集群式并行處理,采用異步隊(duì)列處理機(jī)制,SQL轉(zhuǎn)內(nèi)存變量進(jìn)行運(yùn)算。(1)實(shí)現(xiàn)日間聯(lián)機(jī)交易在各節(jié)點(diǎn)的動(dòng)態(tài)分配和自動(dòng)負(fù)載均衡,大幅縮短數(shù)據(jù)加工時(shí)間。此外,計(jì)算節(jié)點(diǎn)采用PCSERVER虛擬機(jī)部署,成本低廉,可靈活擴(kuò)展,線性提升系統(tǒng)處理能力。(2)異步隊(duì)列處理:采用異步隊(duì)列處理機(jī)制,將用戶提交的高并發(fā)、大數(shù)據(jù)量、長(zhǎng)交易的業(yè)務(wù)請(qǐng)求拆分為若干個(gè)隊(duì)列并發(fā)處理,可以有效應(yīng)對(duì)瞬時(shí)交易峰值,使系統(tǒng)既充分發(fā)揮最高處理能力,又確保始終處于在能力極限范圍內(nèi),提高系統(tǒng)整體響應(yīng)速度和處理效率。(3)內(nèi)存計(jì)算:實(shí)現(xiàn)將造成系統(tǒng)壓力最大的日間聯(lián)機(jī)交易轉(zhuǎn)移到計(jì)算節(jié)點(diǎn)的內(nèi)存中進(jìn)行處理,使原本需在數(shù)據(jù)庫(kù)中運(yùn)行的大量SQL語(yǔ)句轉(zhuǎn)換為內(nèi)存變量進(jìn)行運(yùn)算,不僅提高了計(jì)算效率,還最大程度減輕了數(shù)據(jù)庫(kù)壓力,節(jié)省了昂貴的數(shù)據(jù)庫(kù)資源消耗。(4)容錯(cuò)保障機(jī)制:實(shí)現(xiàn)對(duì)計(jì)算節(jié)點(diǎn)運(yùn)行狀態(tài)的實(shí)時(shí)監(jiān)控,一旦節(jié)點(diǎn)發(fā)生宕機(jī)等異常情況,即時(shí)自動(dòng)將交易FailOver(故障切換)到其他節(jié)點(diǎn)上繼續(xù)處理,不影響業(yè)務(wù)使用,極大提升系統(tǒng)的高可用性。2.高效可擴(kuò)展的公式引擎為保障報(bào)表批量加工性能,首次采用LEX和YACC技術(shù)以及PostgreSQL開源數(shù)據(jù)庫(kù)架構(gòu),設(shè)計(jì)了詞法分析、語(yǔ)法分析、語(yǔ)義轉(zhuǎn)換、語(yǔ)義分析以及目標(biāo)代碼生成等5個(gè)功能模塊,構(gòu)建了一套高效、可擴(kuò)展、易維護(hù)的全新公式解析引擎。采用分治算法、貪心算法等優(yōu)秀算法及層次化拓?fù)渑判虻墓讲⑿刑幚砑夹g(shù),全新研發(fā)表級(jí)復(fù)制、區(qū)域公式、偽SQL公式、打標(biāo)表公式、宏定義公式等高性能報(bào)表公式,報(bào)表批量處理效率提高數(shù)十倍,滿足了全行監(jiān)管報(bào)表集中加工的批量處理的性能要求。制定報(bào)表公式體系的建設(shè)標(biāo)準(zhǔn),首次統(tǒng)一了數(shù)據(jù)分析類報(bào)表公式體系。3.自動(dòng)化分析報(bào)告針對(duì)監(jiān)管分析報(bào)告處理邏輯復(fù)雜、涉及源數(shù)據(jù)量大、報(bào)送時(shí)間急迫的特點(diǎn),結(jié)合監(jiān)管分析報(bào)告的業(yè)務(wù)需求和報(bào)送自動(dòng)化的技術(shù)需求,提出了一種可配置、模塊化加工的金融監(jiān)管分析報(bào)告的生成方法。該方法通過(guò)作業(yè)鏈批量完成數(shù)據(jù)源裝載和轉(zhuǎn)換,通過(guò)Antlr實(shí)現(xiàn)了處理規(guī)則開發(fā)模塊,通過(guò)JFreeChart實(shí)現(xiàn)了復(fù)雜圖片生成模塊,通過(guò)FreeMarker實(shí)現(xiàn)了報(bào)告文檔生成模塊。使用此方法不僅可以簡(jiǎn)化用戶操作,提高用戶便利性,還減少了報(bào)告生成時(shí)間,提高使用效率,并且實(shí)現(xiàn)異常數(shù)據(jù)、周期變化等分析信息,為后期報(bào)告的調(diào)整及校驗(yàn)爭(zhēng)取了時(shí)間。4.業(yè)務(wù)條線模型體系以客戶為中心,以數(shù)據(jù)分類和定義為指導(dǎo),以“債權(quán)債務(wù)信息以生產(chǎn)系統(tǒng)為準(zhǔn),管理分類信息以有人維護(hù)的管理系統(tǒng)為準(zhǔn)”為原則,整合各源系統(tǒng)數(shù)據(jù),采用雪暴模型(雪花模型與星型模型的結(jié)合)構(gòu)建了各業(yè)務(wù)條線的模型體系。

三、企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)的業(yè)務(wù)特點(diǎn)

1.企業(yè)級(jí)監(jiān)管信息集中服務(wù)在大型商業(yè)銀行中率先實(shí)現(xiàn)了監(jiān)管報(bào)表全行集中,有效解決了監(jiān)管報(bào)告信息分散加工、資源投入高、數(shù)據(jù)不一致、數(shù)據(jù)準(zhǔn)確性不高以及自動(dòng)化加工率和報(bào)送效率低等監(jiān)管信息報(bào)送領(lǐng)域存在的問(wèn)題,實(shí)現(xiàn)全行監(jiān)管信息的統(tǒng)一管理、集中加工、共享使用,確保不同監(jiān)管部門的監(jiān)管數(shù)據(jù)一致性,實(shí)現(xiàn)數(shù)據(jù)“一口出”。2.先進(jìn)的填報(bào)流程提供一體化的報(bào)表配置、報(bào)表加工、數(shù)據(jù)填報(bào)、展現(xiàn)、監(jiān)測(cè)預(yù)警、組裝報(bào)送等整體流程和功能,將報(bào)表填報(bào)模式由傳統(tǒng)的“自下而上、層層上報(bào)”,轉(zhuǎn)變?yōu)椤翱傂屑屑庸?、逐?jí)審查確認(rèn)”,填報(bào)流程從原來(lái)的9個(gè)環(huán)節(jié)簡(jiǎn)化為4個(gè)環(huán)節(jié),顯著提高填報(bào)效率。3.數(shù)據(jù)“同源同質(zhì)同規(guī)”基于各源系統(tǒng)數(shù)據(jù)進(jìn)行關(guān)聯(lián)整合,確定可信數(shù)據(jù)源,采取跨系統(tǒng)拼接的思路,有效解決數(shù)據(jù)來(lái)源分散、數(shù)據(jù)不一致等問(wèn)題,構(gòu)建了包含貸款、存款、理財(cái)、表外、同業(yè)等各條線的大寬表體系。此外,在大寬表體系的基礎(chǔ)上,采用雪暴模型構(gòu)建了各業(yè)務(wù)條線的多維匯總層,推進(jìn)了數(shù)據(jù)的“同源同質(zhì)同規(guī)”。4.有效推動(dòng)數(shù)據(jù)治理基于整合后的基礎(chǔ)數(shù)據(jù)開展數(shù)據(jù)質(zhì)量監(jiān)測(cè),并通過(guò)血緣分析,支持報(bào)表數(shù)據(jù)到基礎(chǔ)明細(xì)數(shù)據(jù)的追溯,使報(bào)表問(wèn)題能定位到明細(xì)數(shù)據(jù)問(wèn)題,在實(shí)現(xiàn)據(jù)實(shí)調(diào)整報(bào)表的同時(shí),也為數(shù)據(jù)源頭整改提供有力抓手。

四、企業(yè)級(jí)監(jiān)管信息集中服務(wù)及報(bào)告平臺(tái)的社會(huì)經(jīng)濟(jì)效益

1.數(shù)據(jù)質(zhì)量極大提升報(bào)表數(shù)據(jù)來(lái)源基本涵蓋了農(nóng)業(yè)銀行主要業(yè)務(wù)源系統(tǒng),完善數(shù)據(jù)拼接,使報(bào)表自動(dòng)加工率由56%提升至90%,通過(guò)“同源同質(zhì)同規(guī)”,保障數(shù)據(jù)一致性,實(shí)現(xiàn)數(shù)據(jù)“一口出”。2.填報(bào)效率顯著提高,切實(shí)減輕基層負(fù)擔(dān)采用全國(guó)集中的系統(tǒng)架構(gòu),將報(bào)表填報(bào)模式由傳統(tǒng)的“自下而上、層層上報(bào)”,轉(zhuǎn)變?yōu)椤翱傂屑屑庸?、逐?jí)審查確認(rèn)”,填報(bào)流程從原來(lái)的9個(gè)環(huán)節(jié)簡(jiǎn)化為4個(gè)環(huán)節(jié),加班不再是家常便飯。3.促進(jìn)數(shù)據(jù)管理與服務(wù)轉(zhuǎn)型隨著數(shù)據(jù)質(zhì)量和填報(bào)效率的大幅提升,統(tǒng)計(jì)人員在做好監(jiān)管報(bào)送的前提下,還能開展分析型應(yīng)用,促進(jìn)農(nóng)業(yè)銀行數(shù)據(jù)管理與服務(wù)工作轉(zhuǎn)型。4.有效推動(dòng)數(shù)據(jù)治理支持報(bào)表數(shù)據(jù)到基礎(chǔ)數(shù)據(jù)的追溯,分行能下載到因空值等原因?qū)е碌娜笨趯?duì)應(yīng)的問(wèn)題明細(xì)數(shù)據(jù),從而推動(dòng)源頭整改,對(duì)報(bào)表手工干預(yù)進(jìn)行留痕,使分行從原來(lái)的手工直接改報(bào)表,轉(zhuǎn)變?yōu)橐罁?jù)問(wèn)題明細(xì)數(shù)據(jù)據(jù)實(shí)糾錯(cuò)補(bǔ)錄。5.釋放大量設(shè)備及資源采用集群式并行處理、異步隊(duì)列處理、應(yīng)用級(jí)負(fù)載均衡、高效可擴(kuò)展的公式引擎、內(nèi)存計(jì)算、可視化配置方式等技術(shù),解決了監(jiān)管領(lǐng)域全行集中帶來(lái)的系統(tǒng)壓力,不僅實(shí)現(xiàn)了企業(yè)級(jí)監(jiān)管信息集中服務(wù),同時(shí)還釋放大量原有生產(chǎn)設(shè)備及運(yùn)維資源。

作者:張曉 單位:中國(guó)農(nóng)業(yè)銀行總行研發(fā)中心