央行印发的《金融科技(FinTech)发展规划(2019-2021年)》明确提出,成立健全企业级大数据平台,进一步提升数据洞察能力和基于场景的数据挖掘能力,充分开释大数据作为基础性战术资源的主题价值。
这为金融行业的大数据基础设施建设提供了很好的指引,各大金融机构在把大数据能力打造成为企业的主题竞争力之一。中国电财作为一家头部财政公司,肩负着为国度电网成员单元及经中国银保监会核准的服务对象提供金融服务的沉任,建设大数据平台成为其数字化转型之路上的一个沉要工程。
行业初创
中国电财落地企业级大数据平台
2021年4月1日,中国电财公司级大数据平台项目第一阶段所有建设工作,全面投产利用,实现了行业前沿的“流批一体”职能,即融合批推算和流推算为一体,降低运维成本,提高数据推算了局的一致性。这标志取我国财政公司大数据平台建设的理想及技术都往前逾越了沉要一步。
中国电财大数据平台自上线之日起,对表提供数据服务3300余万条,有力支持了国度电网公司财政数据日常监测及产业链金融业务数据回传需要,并且在中国电财经营治理数据统计、金融监管数据报送等工作中阐扬了效用,凸显出金融大数据的集聚和增值作用。
三大亮点
成就中国电财大数据平台当先性
国电财大数据平台选取“流批一体”数据湖建设架构,构建覆盖数据治理、数据运营、数据服务的全方位数据平台,无论是在技术、数据模型,还是在机能上都拥有行业当先性:
1、首个业务治理、公司治理双模型,真正实现数据一个池
大数据平台数据模型融合国网SG-CIM统一数据模型和金融业务行业数据模型建设成就和理想,全面规划公司治理和业务治理两大板块数据模型,目前已实现中国电财全数业务数据纳入数据模型,后续持续实现公司治理数据模型建设,真正实现公司数据一个池,全面满足中国电财在数据差距化、尺度化、特色化治理上的需要。
2、先进技术架构,高效对接现有系统
大数据平台以开源CDH为基础,规划离线数据、实时数据处置,全面纳入结构化、非结构化数据,别离选取基于impala的内存推算实现离线数据高效推算,Flink集群建设实时数据处置路线,借助盛行BI工具搭建公司数据分析平台,restful接话柄现数据服务机造,从底子上规划中国电财数据平台系统建设蓝图,逐步解决中国电财在数据治理、数据分析和数据运营上的问题。
3、逾越式提升数据推算机能
中国电财公司级大数据平台选取分层设计、内存推算、并行处置机造,通过集群式部署,大幅提升数据推算机能。数据批处置功夫由老数据平台的3幼时缩短至45分钟左右,效能提升了80%,数据正确率大幅提升,解决了中国电财在数据正确性、实时性、高效性上存在的瓶颈和问题。
专业保险
这条大数据平台建设之路不轻松
2020年3月,中国电财企业级大数据平台项目正式启动,人生就是搏科技派出了一批拥有丰硕金融业务数据平台建设经验的专家,亲昵共同项目建设,那使佚值疫情高危期,阻力远比设想中的大。为了保险项目质量与进度同时预防疫情给项目带来的风险,人生就是搏科技项目组一向坚守项目地,选取线上、线下合作方式,有序推动项目进展。
双方共克阻力,陆续实现了近况分析、需要分析、设计开发、系统集成测试、用户验收测试、机能测试等工作。
2020年9月7日,实现项目一期职能成功上线;
2021年4月1日,实现项目二期职能成功上线。
至此实现原报表系统职能全面切换至大数据平台,共计集成源数据项1.51万余个,日采集数据量突破1600万条,并成功落地8个一级业务主题模型,涵盖29个二级主题,共226个数据实体,7015个数据项,真正实现了中国电财内部数据一个源。
项目顺利投产上线并在架构及机能受骗吓宗行业5-10年,人生就是搏科技再一次用创新心灵和专业服务为客户创造价值,助力中国电财在数字化转型中赢得先机。
中国电财不仅实现了信息化水平科技和运营治理能力的全面升级,同时作为财政公司领域首个基于大数据技术的“流批一体”式数据湖建设项目,也为后续财政公司数据架构选型提供了沉要借鉴意思。