【IT168案例】使用Informatica产品完成数据的加载、清洗、转换工作显得尤为简单,图形化、流程化设计使维护人员能够快速、顺畅的操作,即使数据源结构发生变化,也不会像以前必须修改大量的程序代码,只需要在PowerCenter中配置一下即可。
——江苏紫金农村商业银行股份有限公司科技信息部项目架构负责人郭亚鹏
江苏紫金农村商业银行是江苏农信体系下57家农商行的一员,总部位于南京,下辖9家一级支行,125家营业网点,员工总数2200余人。
紫金农商银行于2013年建设了江苏农信体系下首例ODS数据仓库项目,整合托管于省联社的核心系统及外围系统数据,建立统一数据视图,通过统一数据加工,解决了数据有效性和标准化两大基础问题,为全行业务发展、精细化管理、决策及监管提供有力支撑。
解决之道:搭建统一的数据平台
一个成功的ODS数据仓库项目,第一步就是要进行数据整合,将多源数据进行统一集成并非易事。显然,依靠人工处理会大大影响数据的及时性与准确性,紫金农商银行决定搭建统一的数据平台,并选择了成熟的ETL工具代替人工方式,对不同数据源中的业务数据进行自动抽取和转换,然后经过对这些数据的清理、标准化和整合的过程,将其统一存储到ODS数据仓库中。
Informatica技术:成熟的ETL方案实现数据整合
在仔细分析数据仓库项目建设需求后,紫金农商银行综合比较、测试了一些知名厂商的ETL产品,最终选定了Informatica PowerCenter产品,进行全行业务数据的抽取、转换、加载和整合。在试用阶段同,紫金农商银行就发觉Informatica PowerCenter时在大数据处理上的并发性及性能较高,并容易上手,图像化安装和开发、流程化设计使维护人员能够快速、顺畅的操作,即使数据源结构发生变化,也不会像以前必须修改大量的程序代码,只需要在PowerCenter中配置一下即可。当然,让紫金农商银行锁定Informatica产品的另一个重要原因,是神州数码自主研发的ODS_tools工具能够快速生成Informatica任务,使开发工作量大为缩减。
客户收益:全行业务数据统一管理
基于Informatica产品搭建的数据平台,帮助紫金农商银行建立了规范的数据处理流程,优化了系统架构,增强了系统的健康形态,提高了数据加载、清洗、标准化的效率。紫金农商银行科技信息部项目架构负责人郭亚鹏介绍:在手工编程阶段,每次导入数据都需要2-3小时,而现在半小时左右即可完成全部任务,开发人员不需要始终关注导入过程,只在系统EXCEL表格中有报错提醒时及时修改即可,他们能够将更多时间投入到更有价值的新程序开发、数据分析中。
不仅如此,对高管而言,管理企业如同驾驶飞机,信息反馈准确、值得信赖的“仪表盘”能让企业“一切尽在掌握”,正确把握市场航向,快速做出合理决策。在ODS数据仓库项目中,紫金农商银行还引入了“管理驾驶舱”系统,高管们可以通过全景、高级、完整的数据视图,进行经营分析和风险预警,更有效地支持管理决策。