打造金融“智能核心” 浙江农信大数据平台建设亮点纷呈

  • 2020-06-28
  • John Dowson

凌晨五点, 你被孩子的哭声吵醒, 你拍了一把沉睡中的老公, 他雷鸣般的鼾声岿然不动, 你翻身下床,把孩子抱到客厅哄睡, 然后你马不停蹄准备全家人的早餐, 即将出门的时候,孩子又哭了, 老公匆匆网络直播高价挖人

打造金融“智能核心” 浙江农信大数据平台建设亮点纷呈网络直播高价挖人

文/浙江省联社 沈捷

数字经济是浙江的“一号工程”。近年来,随着科技的不断发展,数字经济逐渐成为经济社会可持续发展的新引擎。面对这一趋势,浙江省联社在大数据平台建设的基础上,于2019年提出了以科技引领数字化转型的发展战略。一年多来,浙江农信依托数字化转型积极探索前沿技术,加快大数据、人工智能、云计算等技术应用布局,推动线上线下融合发展,金融科技对业务发展的支撑和服务能力得到跨越式发展。基于大数据平台,浙江农信已建成20个系统及场景应用,该平台正逐渐成为浙江农信金融科技名副其实的“智能核心”。

自大数据平台建设以来,平台规模逐年增长,集群数、服务器、数据量均呈现快速增长。

稳定、高效、包容的金融科技应用中台

浙江农信大数据平台整合全域数据,通过统一标准、口径和加工模式,打造便捷共享的中台数据支撑体系。利用封装复杂的大数据处理技术,将数据以服务API等方式提供服务应用,有效提升开发效率,降低开发难度,实现平台“三项”能力的有效提升。

海量存储的能力。为了更好地匹配应用系统数据需求的多样性,浙江农信大数据平台设计了准实时ODS数据集群和T+1数据集群两套集群,独立处理不同时效的数据,在ETL处理和存储能力上更加灵活高效。在存储尽量多明细数据的同时,提供历史数据查询。相较于传统平台,其扩容更加方便,成本也进一步压缩,既满足了新应用的海量数据需求,又为传统系统的历史迁移打好基础。如浙江农信历史的交易数据庞大,基于传统数据库的存储性能及存储成本已无法满足要求,通过大数据技术,解决了数据处理的性能问题和海量数据的存储问题,并实现了数据查询的高效率。

全平台数据统一管理、高效运作的能力。大数据平台通过数据统一管理,为浙江农信提供了全面高效的数据资产管控环境,实现了数据的集中、统一和共享为后续各应用系统的开发建设提供了充分的数据支撑保障。如浙江农信利用Hadoop大数据平台的分布式存储、计算和分布式检索能力实现对新一代冠字号系统数据的快速处理和查询,实现了每10分钟更新一次数据的突破。又如实现对多类型数据的统一管理、分布式存储在线扩展、低延时数据处理、实时流式数据处理和提供科学的数据挖掘算法等技术能力,建立了统一的监控运维平台。该平台对各类型操作系统、服务器硬件、各类型数据库、各应用层服务、自定义监控实现统一监控,并与现有告警平台实现对接,实现告警事件的快速触发。

快速、强大、智能的数据分析处理能力

依托大数据平台建设,浙江农信在平台IO吞吐量、并行计算能力、快速数据处理、精准数据分析方面取得了积极进展,具备了进一步挖掘数据内含价值的能力。通过实现数据资源的快速处理和深度应用,逐渐将“数据”打造成为提升自身核心竞争力、实现可持续发展的重要动力。

强大的批处理能力。浙江农信利用大数据平台高效的数据处理能力和强大的并行计算能力,将原先传统数据仓库需要2-3小时的核心ODS批量任务工作时间缩减到半小时以内。而之前受数据量庞大等问题的困扰而迟迟无法落地的CRM2.0、大信贷查询系统等系统应用,在大数据平台的加持下都迎刃而解。如CRM2.0依托大数据平台强大的批处理能力解决了日终数据批处理效率低的问题,实现了海量数据在线实时筛选、准实时客户资金流入提醒、核销贷款客户及关联人资金流入提醒,有效提升客户经理精准营销和不良资产管理方面的效率。

通过准实时ODS构建的后续应用时效性大幅提高,如管理驾驶舱中准实时的存贷款、大额的流入流出等;CRM中信息的变化准实时提醒到客户经理等各类场景。

准实时的数据支撑能力。浙江农信基于大数据的准实时ODS数据平台,实现柜面核心数据的高效获取,从而支撑各应用系统在大数据平台上进行实时数据分析,帮助行社经营管理层更及时地了解行社业绩情况。如利用分布式大数据技术构建出了一套全新的准实时ODS系统,成功将与核心系统的延迟时间由24小时降低到15分钟以内。通过高并发、低延迟的检索查询以及完善的对外访问接口,解决了数据使用者访问速度慢、决策数据时效性不足、客户营销精准性差等诸多问题。准实时ODS系统将原先的单机处理工具替换成为分布式处理工具,将关系型数据库替换为大数据Hadoop数据库,不仅大大提高了数据处理的速度,并且后续应用指标加工、数据集市的构建速度以及指标规模都上了新的台阶。基于准实时ODS,浙江农信已经在CRM客户关系系统、管理驾驶舱系统、智慧现金系统等系统的应用上取得了很好的效果。

OLAP是指在线联机分析处理,服务于数据查询分析和业务决策。

ODS是一个面向主题的、集成的、可变的、当前的细节数据集合,用于支持企业对于即时性的、操作性的、集成的全体信息的需求。

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

CRM是指客户关系管理。

网络直播高价挖人 近日,记者从银保监会获悉,银保监会积极响应粤港澳大湾区建设统筹规划,成立了支持粤港澳大湾区建设工作小组。银保监会还与广东省政府就设立大湾区国际商业银行进行沟通,目前广东省正就

免责声明:本站所有信息均搜集自互联网,并不代表本站观点,本站不对其真实合法性负责。如有信息侵犯了您的权益,请告知,本站将立刻处理。联系QQ:1640731186

评论留言

发表评论