• 项目背景

    近年来,随着信息化、智能化的快速发展,数据产生的价值越来越受到重视。银行业金融机构有着良好的大数据基础,数据资源必将逐步成为银行业的战略资产,最大程度地挖掘数据价值、实现有效的数据治理将成为银行机构最重要的功课之一。银监会发布《银行业金融机构数据治理指引(征求意见稿)》(以下简称《指引》),要求银行业金融机构将数据治理纳入公司治理范畴,并将数据治理情况与公司治理评价和监管评级挂钩。
    在推进精细化管理和建立分析挖掘平台方面,银行的数据还存在数据基础薄弱,数据不完整不一致的问题。总结来看,当前该农商行体系数据治理存在的问题主要包括:

  • A.缺少数据治理企业文化

    B.没有完善的组织和制度

    C.未建立数据治理流程和有效的认责管理制度

    D.缺少数据治理各领域的管理体系

  • 建设内容

  • 元数据管理

    功能项 功能说明
    数据库类型支持 excel、oracle、mysql、hadoop、hive等数据库类型
    元数据采集 支持元数据自动同步或手工录入
    版本变更支持 支持对字段变更的影响。
    孤儿表提取 支持提取出没有任何上下游关系的孤儿表
    微服务治理支持 支持对web service及微服务及restful等接口元数据及调用关系的自动解析
    专业术语维护 支持对专业术语进行编辑维护
    影响分析 支持自动对对字段级别的上下游影响分析,系统表变更后影响分析
    血缘分析 支持自动对字段级的血缘关系
    自动生成DDL 支持通过随机勾选特定的字段后自动生成建表语句
    元数据信息浏览和维护 元数据的浏览查询
    数据地图 支持跨系统数据地图的自动提取与展示
    任务调度 支持配置任务调度,定时对元数据进行抽取;调度运行
    ETL工具数据流自动提取支持 支持kettle、DS等主流ETL工具数据流的自动提取
    自定义查询与导入 如可查询出未对字段进行comment的数据,并进行导出,导出进行补录后,再导入回元数据库中
    存储过程或函数数据流解析 支持存储oarcle、iq数据库或者函数进行数据流的自动解析,成功率达95%以上
    指标元数据管理 支持对指标业务和技术元数据进行维护、并能与数据库元数据进行关联
    标准需求清单提取生成 业务人员可通过搜索并筛选跨元数据目录的需求指标清单,并自动生成数据需求清单

    数据质量管理

    功能项 功能说明
    数据质量规则录入 支持自定义sql语句进行质量监控规则录入
    多数据源规则配置 支持两个数据源以上的规则配置
    任务组管理 支持对简单规则进行分组
    任务调度 支持对简单任务或任务组进行调度、运行
    运行日志管理 可对检核规则的每日运行情况进行监控、统计
    问题统计 支持按责任人、按部门、按系统等维度进行统计分析
    数据质量报告 支持自定义数据范围出具数据质量报告
    知识库管理 针对问题进行处理、问题跟踪、反馈等

    数据标准管理

    功能项 功能说明
    数据标准管理 包括数据标准导入、维护、导出等
    与元数据的关联
    落地查询 针对落地情况进行比对校核,并可对不符合标准的数据项进行导出
    标准新增流程审批 新增标准数据项时,可支持设置流程审批
    版本管理 支持对数据标准的历史版本进行管理

    数据交换管理

    功能项 功能说明
    数据装载 支持文件元数据管理,并支持文件数据成功装载到数据库,并实现装载数据查询
    Hive-Oracle数据交换 通过kettle支持hive数据订阅交换至Oracle数据库,并反馈运行日志及运行结果,以及结果数据查询
    Oracle-hive数据交换 通过kettl支持Oracle数据订阅交换至hive数据库,并反馈运行日志及运行结果,以及结果数据查询

    数据处理管理

    功能项 功能说明
    统一数据的查询 支持Oracle、mysql数据库数据源的统一适配查询界面,执行并及时返回查询结果展示
    数据流程开发 通过kettl可视化编辑,支持前端页面可视化数据流程开发,并执行数据处理流程,形成结果
  • 实施效果

    该农商银行通过实施数据治理体系建设,满足了日常银行的监管报送,在分析挖掘潜在客户,发现客户流失风险发挥着不可替代的基础作用,在风险管理上,提高了模型的精确度和数据的准确度。在反洗钱、反欺诈等问题上,保证交易双方交易信息的完整性,完整的串联了审计部、风险部、业务部门与技术部门等。数据治理不仅满足了合规要求,同时也为客户轨迹分析提供的数据积累,不但达成了监管部门的要求,也对我们内部的信息完整性、数据模型的建设都带来了好处。

  • Copyright © 2019 Copyright © 博奇信息科技有限公司 版权所有

    备案号:陕ICP备19007356号