【金融科技】山东农信:基于大数据建设的统一监管数据报送平台

您所在的位置:网站首页 数据报送系统网络部署拓扑 【金融科技】山东农信:基于大数据建设的统一监管数据报送平台

【金融科技】山东农信:基于大数据建设的统一监管数据报送平台

2024-01-08 08:14| 来源: 网络整理| 查看: 265

从上图中可以看出,基于大数据计算技术建设的统一监管数据报送平台按照数据架构层次可分为数据产生层、数据交换层、数据整合层、数据应用层和数据展示层。

1.数据产生层是数据的来源,包括业务办理、内部管理过程中产生的数据,主要是指核心业务系统、信贷管理系统、国际结算系统、理财业务系统等业务办理过程中产生的数据以及人力资源管理系统等使用过程中产生的数据。

2.数据交换层作为系统间数据交换的枢纽,对于数据产生层、数据整合层、数据应用层之间数据进行双向交换。数据不允许系统间点对点传输,所有系统对下游提供数据均通过数据交换层,数据交换层本身不产生数据,但可以对源数据做一些清洗处理。交换方式分为批量交换和实时交换,其中批量交换用于产生层与整合层、应用层间非实时的、大数据量的数据交互,实时交换用于系统间少量、实时或者准实时的数据交互。数据交换采用DATASTAGE工具进行数据的抽取、转换和加载过程,部署采用集群架构,不仅可以提高数据抽取效率,还可以避免机器的单点故障。

3.数据整合层是将数据按照一定规则进行整合后统一存储,以方便后续的查询和分析。数据整合层作为数据集中存储、整合的核心,实现了数据共享,避免了系统间数据重复存储和加工问题。

4.数据应用层主要存储基于数据整合层提供的原始数据和衍生数据,根据业务需求进行相应的加工,提供应用所需的结果数据或接口数据,并提供用户使用数据的界面和方式,它对整合后的数据进行深度分析,利用不同手段对数据处理结果进行展现,包括固定报表、多维分析、灵活查询等。

5.数据展示层提供了机构、用户、角色的统一管理,并根据监管部门要求生成报文并管理报文,展示层还提供数据补录界面,用于弥补监管报送需要而基础业务系统数据缺失内容。

(二)平台特点

1.统一的数据平台:统一监管数据报送平台通过对银行核心、信贷等业务系统数据按照监管报送要求进行整合,并按照业务类型进行了宽表处理,建设了统一的监管数据集市,为监管上报提供质量良好的数据源,为后续建设的各类数据报送等系统提供数据基础,减少后续建设的重复投资,确保数据源的稳定性和数据一致性。

2.统一的报送平台:统一监管数据报送平台是面向监管要求的应用报送平台,已集成了目前监管要求的6个报送系统,并提供灵活的扩展接口,以便快速搭建后续新的报送系统,并能够确保新应用的扩展,做到不影响已有报送系统的功能,确保了平台的稳定性和扩展性。

3.统一的流程管理和控制:统一监管数据报送平台具有良好的权限控制功能,实现了系统相关人员角色和功能模块的自由定制,使填报人、审核人、复核人、数据查看人等多种角色有了比较明确的责任划分和操作权限控制。同时实现数据采集、数据维护、数据加工、数据检验、报文生成等处理的全流程管理,进一步落实了监管统计数据各环节的质量控制责任,做到从数据源到生成指标的数据质量全流程监控。

4.统一的批量调度。批量调度程序基于J2EE开发,引入DBUTILS、QUARTZ等开源计算框架,调度任务按照自动化程度分为手动和自动两种;调度周期分为定时调度和批量调度两种;所有任务之间通过配置依赖关系来决定任务执行的触发条件和执行的先后顺序。

(三)系统实施过程

统一监管数据报送平台建设采用业务驱动、分批实施的策略。在2013年为快速满足EAST报送需要,启动了统一监管数据报送平台建设,并于2013年6月部署上线,随着监管报送系统的增多,于2015年先后启动了数据整合平台和数据加工平台的建设,并分别于2016年4月和12月部署上线,满足了数据抽取和加工存储的需要。2013年以来,陆续在监管数据报送平台上实施了 EAST3.0报送,EAST报送优化,广义信贷报送,个人银行账户报备等项目建设。

应用效果

通过基于大数据计算技术建设的统一监管数据报送平台,不仅夯实了信息数据基础,提升了监管数据报送质量,而且通过平台的建设,有效的提升了金融机构的管理理念。通过统一监管数据报送平台建设,共减少冗余存储1.4T;基于平台相比单个建设报送系统减少工作量投入19人月,同时开发效率提升40%,平均开发周期缩短2-3个月;减少设备投入3台小型机,6台X86服务器;数据抽取效率提升150%,整体缩短数据加工抽取时间3小时。特别是在数据报送质量方面效果显著,如标准化监管数据报送,数据自动采集比例从2014年底的67.78%提高到2017年6月的90.76%,支付信息统计分析系统数据加工过程由上线时的8小时缩短为现在的1小时,数据报送的质量和时效性都大大提升。

(一)夯实信息基础

统一监管数据报送平台建立了金融业务数据管理和应用的基础数据集市,以实现对金融机构的核心系统、信贷系统等基础业务数据的统一收集、加工、整合和数据存储。基础数据为各类监管报送系统提供了统一的基础数据来源,也为金融机构后续系统的建设提供高质量的基础数据。

(二)提升报送质量

统一监管数据报送平台通过对各个报送系统的深入分析,以“统一规划、统一管理、统一标准、资源共享”为建设原则,实现全面、统一、敏锐、协调的金融统计体系,达到对金融机构的全面监测和预警。通过建立起一套相对完善和成熟的金融统计标准化工作管理体制和运行机制,做好金融统计标准的制定、实施和执行监督工作,并提升金融机构的报送质量。

(三)提升金融机构的管理理念

统一监管数据报送平台的建立,使得金融机构的统计人员及归口管理部门的职能由“做报表”提升为“管理报表”。报送平台的使用极大解放了统计人员进行手工报表的繁重束缚,使得统计人员有更多的精力和时间用于核实、分析数据,提高了数据的应用,发挥了监管信息的价值。利用平台实现了从数据的采集、复核、检验、汇总到数据生成、报送等各环节的流程控制,并使当期业务数据和相关指标分析及时传达到高管层和相关条线部门,有效实现了日常监测的流程控制并提升了统计数据对业务经营的指导作用。

单位介绍

山东省农村信用社联合社成立于2004年6月,下设13个办事处、1个审计中心、1家市联社,辖110家农商行。全省共有5126个营业网点,从业人员7万多人,是省内营业网点和从业人员最多、服务范围最广、资金规模最大的金融机构。截至2017年6月末,全省各项存款余额达16455.24亿元,各项贷款余额达10176.41亿元,存贷款余额和市场占有率均居全省金融机构首位。

山东省联社成立以来,始终将科技建设作为全省农村商业银行长远发展的重点工程之一,不断坚持“小银行、大平台”发展战略,持续强化科技创新,累计研发各类信息系统140余套,构建了集传统业务与新兴业务于一体,覆盖同城、异地、跨行的科技支撑平台,为全省农村商业银行的改革发展提供了强有力的科技支撑和引领。返回搜狐,查看更多



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3