业务背景
数字化变革下,科技带动金融业变革的速度超越了人们的想象,金融行业已经从金融数字化、互联网金融步入到了深度融合的智能金融时代。
近年来,常熟农商银行积极拥抱分布式、云计算、大数据、人工智能等创新技术。统计与数据资产部作为行内数据的管理者,掌握了全行所有数据资产和数据服务,承接了行内数据管理、指标加工、数据服务和监管报送等职能,是常熟农商银行的核心职能部门,给全行业务创新、业务决策提供了关键数据支撑。
随着行内业务的快速发展,统数部管理的数据日益增长,传统的元数据管理在面对大规模、复杂数据环境时,面临着效率低、时效性差、准确性难以保证、使用不直观等问题,难以满足银行数据的高效管理需求。同时,信息系统的复杂性和多样性,数据的来源、流动和转换关系变得越来越复杂,使得银行在数据管理方面面临着诸多挑战,如数据源众多、数据流动复杂、数据质量难以保证等。
解决方案
- Fabarta 利用多模态智能引擎,使用图技术构建数据血缘,实现全域字段级的血缘解析,构建数据血缘地图。基于 ArcGraph 图数据库的 Fabarta 数据编织平台,提供了强大的血缘解析引擎,对接 SQL、存储过程、Markdown等类型的脚本,实现了全流程的数据血缘识别与图化存储的数据血缘地图。提供不限制层级的全链路数据血缘查询能力,配合毫秒级的查询响应性能,实现全流程的血缘溯源和影响分析。
- 利用 ArcGraph 图数据库的图计算算法能力,完成典型业务场景的血缘分析,包括数据孤岛识别、关键数据识别、循环依赖血缘异常场景识别。极大的提高了元数据管理效率和数据开发质量,同时明显的降低了数据运维成本。
- 大模型加持的数据智能治理,完成对元数据的归类、业务元数据的智能补齐等。
客户收益
Fabarta 图数据库引擎及图智能产品矩阵能力在常熟农商银行的落地案例中,实现了全面、准确的数据血缘关系追溯,能够自动记录和分析数据血缘关系,快速定位数据问题,更好地管理和保护数据,提高了数据的安全性和可靠性。有效优化了数据治理流程,提高了数据治理效率,提升了合规监管和风险管理能力,实现了数据价值的最大化。
1.血缘地图助力数据开发质量显著提高
- 项目过程中定位到100+问题脚本和文件,2000+不规范脚本以及10000+问题整改点。
- 数据问题的检查范围从之前的最多3层,扩展到全域覆盖,从业务系统到最顶层应用。
- 数据问题的定位耗时从1.5小时降低到20分钟。
2.数据孤岛定期巡检,降本增效
在数据孤岛分析中,定位到3万余张孤岛表,一期项目中一共推动整改2万余张孤岛表,释放存储空间近800TB,可节省存储成本600万/年。
3.数据血缘赋能日常工作,减少投产问题,提升工作效率
字段级数据血缘地图对接行内投产流程,实现了投产前的元数据和血缘核验,投产上线前即可预警数据问题,大大降低了投产风险。