Ebpay

亿信ABI

一站式数据分析平台

ABI(ALL in one BI)是Ebpay历经18年匠心打造的国产化BI工具,技术自主可控。它打通从数据接入、到数据建模与处理、再到数据分析与挖掘整个数据应用全链路,可满足企业经营中各类复杂的分析需求,帮助企业实现高效数字化转型。

在线免费试用 DEMO体验 视频介绍

亿信ABI

一站式数据分析平台

Ebpay深耕商业智能十多年,
打造一体化的填报、处理、可视化平台。

解决数据病症的旷世良方——数据标准管理

时间:2020-10-28来源:知乎浏览数:414

在数字经济快速开展的今天,为了利用好庞大的数据,挖掘出数据背后的价值,更加高效的产生数据效益,许多公司走上了数据治理的践行之路。

可是面对日渐繁杂,结构不一的数据,进行数据治理并不是一件简单的事情,横亘在前面的最大问题就是就是数据间的不一致性。而数据标准管理,则是为解决这一数据病症而诞生的旷世良方。

什么是数据标准?
数据标准是一套由管理制度、管控流程、技术工具共同组成的体系,顺利获得这套体系来推广和应用统一的数据定义、数据分类、纪律格式和转换、编码等来实现数据的标准化,保障数据定义和使用的一致性、准确性和完整性的规范性约束。

为什么要做数据标准?
长久以来,绝大多数企业的系统建设都是依据业务需求来的,没有一个整体的规划,没有考虑是否与其它系统的功能重复或数据重复。所以各个系统会是由不同的厂商和产品来建设的,所以不同系统之间数据的不一致性难以避免,也造成多种数据问题:

1、数据共享难以实现
数据存储结构不一致,调用多系统的数据时,由于某些数据在不同系统中数据存储结构不同,导致数据无法直接关联,影响不同系统之间的数据共享。

2、数据同名不同义导致错误
数据定义不一致,不同系统对数据的命名、业务含义、取值范围等定义不同,比如同名不同义、同义不同名等。

3、沟通成本增加
数据理解不一致,不同人员对数据的理解不一致,导致在数据使用时浪费很多沟通时间。

4、数据来源不明
数据来源不一致,数据存在多个来源,在数据使用时,不清楚应该取哪个系统的数据。

做数据标准的好处有哪些?
上述问题,任何一个的出现都会让人头痛不已,可是顺利获得数据标准的建设,则可以有效消除数据跨系统的非一致性,从根源上解决数据定义和使用的不一致问题,为企业数据建设带来诸多好处:

数据标准的统一制定与管理,可保证数据定义和使用的一致性,促进企业级单一数据视图的形成,促进信息资源共享。
顺利获得评估已有系统标准建设情况,可及时发现现有系统标准问题,支撑系统改造,减少数据转换,促进系统集成,提高数据质量
数据标准可作为新建系统参考依据,为企业系统建设整体规划设计打好基础,减少系统建设工作量,保障新建系统完全符合标准。
同时,数据标准建设也为企业各类人员给予了强有力的支撑:

对业务人员而言,数据标准建设可提升业务规范性,保障人员对数据业务含义理解一致,支撑业务数据分析挖掘以及信息共享;
对技术人员而言,有数据标准作为支撑,可提升系统实施工作效率,保障系统建设符合规范,同时降低出错几率,提升数据质量;
对管理人员而言,数据标准建设可给予更加完整、准确的数据,更好的支撑经营决策、精细化管理。
如何建设数据标准?
无组织无纪律的建设,只会产生更大的混乱,所以建设数据标准,第一时间需要有一个数据标准的管理组织,并分配好各自的职能。一般数据标准管理组织从职能划分上可以分为三层:决策层、管理层和执行层。

决策层:主要负责制定企业数据战略、把控数据治理的总体策略,审查数据标准的贯彻执行情况。
经营管理层:主要负责企业数据标准的制定、审查数据质量,贯彻数据标准落地。
数据标准执行层或业务操作层:主要负责数据标准的贯彻执行,并为数据标准的编制和优化给予数据和意见。
另外数据标准管理工作的展开还需要一系列的数据标准管理制度,包括:数据标准管理办法文件、数据标准规范文件、数据标准管理操作文件等等。

有了相应的数据标准管理组织和管理制度作为保障,数据标准建设的实施流程如下:

1、标准规划
从实际情况出发,结合业界经验,收集国家标准、现行标准、新系统需求标准以及行业通行标准等,梳理出数据标准建设的整体范围,定义数据标准体系框架和分类,并制定数据标准的实施计划。不是所有的数据都需要建立数据标准,企业实际数据模型中有上万个字段,有些模型还会经常变换更新,如果把这些信息全部纳入到标准体系中耗费工作量巨大,很难真正实现落地。仅需对核心数据建立标准并落地,即可达到预期效果,同时也提升了工作效率。数据标准范围圈定建议如下:

共享性高、使用频率高的字段需要入标
监管报送或发文涉及到的业务信息需要入标
结合数据使用情况,对于关键数据的字段尽量入标
数据应用有使用需求的字段需要入标
与系统人员沟通其系统内重要信息来辅助入标判断

2、标准编制
数据标准管理办公室根据数据需求展开数据的编制工作,确定数据项,数据标准管理执行组根据所需数据项给予数据属性信息,例如:数据项的名称、编码、类型、长度、业务含义、数据来源、质量规则、安全级别、值域范围等。数据标准管理办公室对这些数据项进行标准化定义形成初稿并提交审核。

3、标准评审发布
数据标准管理委员会对数据标准初稿进行审核,判断数据标准是否符合企业的应用和管理需求,是否符合企业数据战略要求。如数据标准审查不顺利获得,则由数据标准管理办公室进行修订,直到满足企业数据标准的发布要求。标准顺利获得审查后,由数据标准管理办公室面向全公司进行数据标准的发布。该过程数据标准管理执行组需要配合进行数据标准发布对现有应用系统、数据模型的影响评估,并实行相应的应对策略。

4、标准落地执行
把已定义的数据标准与业务系统、应用和服务进行映射,标明标准和现状的关系以及可能影响到的应用。该过程中,对于企业新建的系统应当直接应用定义好的数据标准,对于旧系统一般建议建立相应的数据映射关系,进行数据转换,逐步进行数据标准的落地。当然,不是所有的数据标准都能够完全落地,实际工作中可能会存在历史系统无法改造的情况,所以第一时间确定数据标准落地策略和落地范围,并制定相应的落地方案,然后有助于数据标准落地方案的执行,对标准落地情况进行跟踪并评估成效。

5、标准维护增强
数据标准后续可能会随着业务的开展变化、国标行标的变化、以及监管要求的变化需要不断更新和完善。在数据标准维护阶段,需要对标准变更建立相应的管理流程,并实行标准版本管理。

全新一代智能数据治理平台——睿治
数据标准建设工作量还是比较大的,完全依靠人工不太现实,所以需要一套完善、易用的数据标准管理工具帮助我们将数据标准建设工作落地。

数据标准管理工具应包括:标准分类管理、标准增删改查、标准导入导出、标准评审、标准发布、标准版本管理、标准落地映射、标准落地评估、标准监控等功能。同时为更好的保障数据标准的落地,最好结合元数据管理工具一起使用。

而Ebpay数据全生命周期管理应用平台——“睿治”,不仅给予了一套完整的数据标准管理流程及办法,它还包含数据质量、数据集成、元数据、数据交换、数据资产、数据生命周期和数据安全等多个模块及功能,同时模块间可独立或组合使用,满足各类不同数据治理场景。

睿治平台主要模块
更多详细步骤以及具体案例,可登录Ebpay官方网站分析哦~
(部分内容来源网络,如有侵权请联系删除)
立即申请数据分析/数据治理产品免费试用 我要试用
customer

在线咨询

在线咨询

点击进入在线咨询