|
版权声明 本白皮书版权属于中国信息通信研究院云计算与大数据研究所，并受法律保护。转载、摘编或利用其它方式使用本白皮书文字或者观点的，应注明“来源：中国信息通信研究院云计算与大数据研究所”。违反上述声明者，本院将追究其相关法律责任。 牵头编写单位（排名无先后）：中国信息通信研究院、广州信安数据有限公司、中国光大集团、国家开发银行、南方电网有限责任公司、中国移动浙江公司、中国外运股份有限公司 参与编写单位（排名无先后）：国家能源集团信息公司、中国电信集团有限公司企业信息化部（数据中心）、南方电网数字电网研究院有限公司、石化盈科信息技术有限责任公司、联通大数据有限公司、北京百度网讯科技有限公司、腾讯科技（深圳）有限公司、华为技术有限公司、阿里云计算有限公司、杭州数梦工场科技有限公司、成都四方伟业软件股份有限公司、北京东方金信科技有限公司、浩鲸科技编写组成员（排名无先后）： 中国信息通信研究院：魏凯、姜春宇、李雨霏、刘海燕、闫树广州信安数据有限公司：骆阳中国光大集团：刘巍 国家开发银行：钟晓良 南方电网有限责任公司：陈彬中国移动浙江公司：傅一平 中国外运股份有限公司：宋清波国家能源集团信息公司：牟岩 中国电信集团有限公司企业信息化部（数据中心）：周文红、张振南方电网数字电网研究院有限公司：甘杉 石化盈科信息技术有限责任公司：蔡春久、辛华联通大数据有限公司：谢云龙、樊利安北京百度网讯科技有限公司：霍琦、龚政 腾讯科技（深圳）有限公司：孙龙君、农益辉华为技术有限公司：刘念、李庆波阿里云计算有限公司：朱松、解敏 杭州数梦工场科技有限公司：念灿华、漆可欣、郝滨、李楷 成都四方伟业软件股份有限公司：刘俊良、李岳璘、周刚、王军北京东方金信科技有限公司：付威、于晶浩鲸科技：佘琼渠 前言 数据标准（DataStandards）是保障数据的内外部使用和交换的一致性和准确性的规范性约束。数据标准管理是规范数据标准的制定和实施的一系列活动，是数据资产管理的核心活动之一，对于政府和企业提升数据质量、厘清数据构成、打通数据孤岛、加快数据流通、释放数据价值有着至关重要的作用。但是目前，各行业缺少数据标准管理的理论指导和行业实践案例，企业在标准建立、标准审核、标准落地、标准评估等方面仍存在诸多困难。 本白皮书结合了国内外数据管理相关理论知识的最新成果，以及国内数据标准管理的实践经验，对数据标准管理进行了深入探讨。重点辨析了数据标准以及相关内涵，梳理了数据标准分类及体系，概括了数据标准管理的组织架构和制度体系，总结了企业开展数据标准管理面临的挑战，并提出了相关实践建议。相信本白皮书对国内各行业从事数据治理工作的管理者、实践者和研究者都将具有一定参考意义。 由于编写的水平和时间有限，难免有所纰漏，欢迎大家批评指正。 一、 数据标准概述数据标准是进行数据标准化的主要依据，构建一套完整的数据标准体系是开展数据标准管理工作的良好基础，有利于打通数据底层的互通性，提升数据的可用性。本章从数据标准的概念入手，多角度探讨数据标准的内涵，构建数据标准分类体系，并阐述了数据标准作为数据资产管理核心要素的重要性。 (一) 数据标准的内涵数据标准（DataStandards）是指保障数据的内外部使用和交换的一致性和准确性的规范性约束[1]。在数字化过程中，数据是业务活动在信息系统中的真实反映。由于业务对象在信息系统中以数据的形式存在，数据标准相关管理活动均需以业务为基础，并以标准的形式规范业务对象在各信息系统中的统一定义和应用，以提升企业在业务协同、监管合规、数据共享开放、数据分析应用等各方面的能力。 “数据标准”并非是一个专有名词，而是一系列“规范性约束”的抽象。但是，数据标准的具体形态通常是一个或多个数据元的集合，即数据元是数据标准的基本单元。《信息技术数据元的规范与标准化第1部分 数据元的规范与标准化框架》（GB/T 18391.1-2002）将数据元定义为用一组属性描述定义、标识、表示和允许值的数据单元。表1以《银行间市场基础数据元》（JR/T 0065-2019)标准为例，展示了银行间市场基础数据元属性及其描述：每一个数据元应由数据元中文名称、数据元英文名称、数据元标识符、说明、数据类型、取值、IMIX域名七个属性组成，每一个数据元属性的描述包括该属性的注释以及相关标准规则。 表 1 数据元示例-银行间市场基础数据元属性及其描述（JR/T0065-2019）
(二) 数据标准的分类数据标准是进行数据标准化、消除数据业务歧义的主要参考和依据。 对数据标准进行分类，将有利于数据标准的编制、查询、落地和维护。 数据标准有多种分类方式，对于不同的分类方式，均可采用以数据元为数据标准制定的基本单元构建数据标准体系。本白皮书以银行业、电信业的数据标准分类为例，说明在这种分类方式下的数据标准。 数据可以分为基础类数据和指标类数据。基础类数据指业务流程中直接产生的，未经过加工和处理的基础业务信息。指标类数据是指具备统计意义的基础类数据，通常由一个或以上的基础数据根据一定的统计规则计算而得到。相应地，数据标准也可以分为基础类数据标准或指标类数据标准。基础类数据标准是为了统一企业所有业务活动相关数据的一致性和准确性，解决业务间数据一致性和数据整合，按照数据标准管理过程制定的数据标准。指标类数据标准一般分为基础指标标准和计算指标（又称组合指标）标准。基础指标具有特定业务和经济含义，且仅能通过基础类数据加工获得，计算指标通常由两个以上基础指标计算得出[2]。并非所有基础类数据和指标类数据都应纳入数据标准的管辖范围。数据标准管辖的数据，通常只是需要在各业务条线、各信息系统之间实现共享和交换的数据，以及为满足监控机构、上级主管部门、各级政府部门的数据报送要求而需要的数据。 在基础类数据标准和指标类数据标准这个框架下，可以根据各自的业务主题进行细分。细分时应尽可能做到涵盖企业的主要业务活动，且涵盖企业生产系统中产生的所有业务数据。以银行业的基础类数据标准和指标类数据标准分类为例（见图1），基础类数据标准分为客户数据标准、产品数据标准、协议数据标准、渠道数据标准、交易数据标准、财务数据标准、资产数据标准、公共代码数据标准、机构和员工数据标准、地域和位置数据标准等。指标类数据标准包括监管合规指标、客户管理指标、风险管理指标、资产负债指标、营销管理指标、综合经营指标等。 基础类数据标准和指标类数据标准通过分别建立基础类数据元和指标类数据元，并将基础类数据元和指标类数据元与数据映射，实现基础类数据标准和指标类数据标准的落地。具体来说，对于结构化数据中的任意一个字段，当其不具备指标特征时，可直接将其与某一业务类别下的基础类数据元（如包含命名规则、数据类型和值域等属性）映射，实现该字段的标准化（符合命名规则、数据类型和值域的规定）；当其具备指标特征时，可直接将其与某一业务类别下的指标类数据元（如命名规则、约束规则、数据类型和值域等）映射，实现该字段的标准化（符合命名规则、约束规则、数据类型和值域的规定）。 图 1 银行业典型基础类数据标准和指标类数据标准 下面以银行业的数据标准分类为例进行数据元及其属性的说明。 1. 银行间市场基础数据分类及数据元 银行间市场基础数据分类为参与方、产品、事件、公共数据、条件、风险控制，其类别及描述如表2 所示。 表 2 银行间市场基础数据分类
银行间市场基础数据的数据元具备相同的数据元属性，包括数据元中文名称、数据元英文名称、数据元标识符、说明、数据类型、取值、IMIX 域名，数据元属性描述见表 1。 以每一基础数据类别为例，在各类别下展示部分数据元。如表3 所示。其中，可以注意到部分数据元属性的值包含数据元属性标准（如“基础数据类别”为“产品”时的“取值”，直接注明取值范围），部分数据元属性的值需引用其他标准（如“基础数据类别”为“产品”时的“说明”）。 表 3 银行间市场基础数据类别及数据元示例
2. 银行经营管理指标数据分类及数据元 《银行经营管理指标数据元》（JR/T0137-2017）将银行经营管理指标数据分为基本信息、统计信息、口径信息、管理信息。银行经营管理指标数据的数据元具备相同的数据元属性，包括名称、定义、约束规则、数据类型、值域、备注（见表4）。 表 4 银行经营管理指标数据元属性及其描述
以每一指标数据类别为例，在各类别下展示部分数据元，如表5 所示。 表 5 银行经营管理指标数据类别及数据元示例
(三) 数据标准在数据资产管理中的作用数据标准从多个方面支撑企业的数字化转型。在业务方面，数据标准能够明确很多业务含义，使得业务部门之间、业务和技术之间、统计指标之间统一认识与口径。
二、 数据标准管理的主要内容数据标准管理是指数据标准的制定和实施的一系列活动。数据标准管理的目标是通过统一的数据标准制定和发布，结合制度约束、系统控制等手段，实现大数据平台数据的完整性、有效性、一致性、规范性、开放性和共享性管理，为数据资产管理活动提供规范依据。 数据标准管理主要内容包括标准分类规划、标准体系建设、标准评审发布、标准落地执行、标准运营维护五个阶段。 (一) 标准规划数据标准规划主要指企业构建数据标准分类框架，并制定开展数据标准管理的实施路线。 数据标准规划的过程主要包括以下六个阶段： （1）数据标准调研 数据标准调研工作，主要从企业业务运行和管理层面、国家和行业相关数据标准规定层面、信息和业务系统数据现状三个方面开展，调研内容包括现有的数据业务含义、数据标准分类、数据元定义、数据项属性规则以及相关国际标准、国家标准、地方标准和行业数据标准等； （2）业务和数据分析 主要根据数据标准调研结果，根据数据标准体系建设原则，初步研究数据标准整体的分类框架和定义，以及对业务的支撑状况； （3）研究和参照行业最佳实践收集和学习数据标准体系建设案例，并研究和借鉴同行业企业单位在本行业数据标准体系规划上的实践经验； （4）定义数据标准体系框架和分类 根据数据标准调研结果以及行业的最佳实践，在对企业现有业务和数据现状进行分析的基础上，定义企业自身的数据标准体系框架和分类； （5）制定数据标准实施路线图 根据已定义的数据标准体系框架和分类，结合企业自身在业务系统、信息系统建设上的优先级，制定数据标准分阶段、分步骤的实施路线图； （6）批准和发布数据标准框架和规划 由数据标准管理的决策层审核数据标准体系框架和规划实施路线图，并批准和发布。 (二) 标准制定标准制定是指在完成标准分类规划的基础上，定义数据标准及相关规则。数据标准的定义主要指数据元及其属性的确定。随着企业业务和标准需求的不断发展延伸，需要科学合理地开展数据标准定义工作，确保数据标准的可持续性发展。 数据标准的定义应遵循共享性、唯一性、稳定性、可扩展性、前瞻性、可行性六大原则：
数据标准定义主要包括分析数据标准现状、确定数据元及其属性两个关键环节： （1）分析数据标准现状 企业应依据业务调研和信息系统调研结果，并分析、诊断、归纳数据标准现状和问题。其中，业务调研主要采用对业务管理办法、业务流程、业务规划的研究和梳理，以了解数据标准在业务方面的作用和存在的问题；系统调研主要采用对各系统数据库字典、数据规范的现状调查，厘清实际生产中数据的定义方式和对业务流程、业务协同的作用和影响； （2）确定数据元及其属性企业应依据行业相关规定或借鉴同行业实践，结合企业自身在数据资 产管理方面的规定，在各个数据标准类别下，明确相应的数据元及其属性。 (三) 标准发布数据标准的评审发布工作是保证数据标准可用性、易用性的关键环节。在数据标准定义工作初步完成后，数据标准定义需要征询数据管理部门、数据标准部门以及相关业务部门的意见，在完成意见分析和标准修订后，进行标准发布。 标准评审发布主要流程包括意见征询、数据标准审议、数据标准发布等三个过程： （1）数据标准意见征询 意见征询工作是指对拟定的数据标准初稿进行宣介和培训，同时广泛收集相关数据管理部门、业务部门、开发部门的意见，减小数据标准不可用、难落地的风险； （2）数据标准审议 数据标准审议工作是指在数据标准意见征询的基础上，对数据标准进行修订和完善，同时提交数据标准管理部门审议的过程，以提升数据标准的专业性和可管理执行性； （3）数据标准发布 数据标准发布工作是指数据标准管理部门，组织各相关业务单位对数据标准进行会签，并报送数据标准决策组织，实现对数据标准进行全企业审批发布的过程。 (四) 标准执行数据标准执行通常是指把企业已经发布的数据标准应用于信息建设，消除数据不一致的过程。数据标准落地执行过程中应加强对业务人员的数据标准培训、宣贯工作，帮助业务人员更好的理解系统中数据的业务含义，同时也涉及信息系统的建设和改造。 数据标准落地执行一般包括四个阶段：评估确定落地范围、制定落地方案、推动方案执行、跟踪评估成效。 （1）评估确定落地范围 选择某一要点作为数据标准落地的目标，如业务的维护流程、客户信息采集规范、某个系统的建设等； （2）制定落地方案 深入分析数据标准要求与现状的实际差异，以及落标的潜在影响和收益，并确定执行方案和计划； （3）推动方案执行推动数据标准执行方案的实施和标准管控流程的执行； （4）跟踪评估成效 综合评价数据标准落地的实施成效，跟踪监督标准落地流程执行情况，收集标准修订需求。 数据标准落地路径可以有以下两种方式，分别是按数据主题逐步推进和按业务目标逐步推进。两种方式的优点、缺点和适用场景如表6 所示。 表 6 数据标准的两种落地路径比较
数据标准落地原则主要包括遵循整体规划、分布实施、价值驱动、确保执行和管控保障。
(五) 标准维护数据标准并非一成不变，而是会随着业务的发展变化以及数据标准执行效果而不断更新和完善。 在数据标准维护的初期，首先需要完成需求收集、需求评审、变更评审、发布等多项工作，并对所有的修订进行版本管理，以使数据标准“有迹可循”，便于数据标准体系和框架维护的一致性。其次，应制定数据标准运营维护路线图，遵循数据标准管理工作的组织结构与策略流程，各部门共同配合实现数据标准的运营维护。 在数据标准维护的中期，主要完成数据标准日常维护工作与数据标准定期维护工作。日常维护是指根据业务的变化，常态化开展数据标准维护工作，比如当企业拓展新业务时，应及时增加相应数据标准；当企业业务范围或规则发生变化时，应及时变更相应数据标准；当数据标准无应用对象时，应废止相应数据标准。定期维护是指对已定义发布的数据标准定期进行标准审查，以确保数据标准的持续实用性。通常来说，定期维护的周期一般为一年或两年。 在数据标准维护的后期，应重新制定数据标准在各业务部门、各系统的落地方案，并制定相应的落地计划。在数据标准体系下，由于增加或更改数据标准分类而使数据标准体系发生变化的，或在同一数据标准分类下，因业务拓展而新增加的数据标准，应遵循数据标准编制、审核、发布的相关规定。 三、 数据标准管理的保障措施(一) 数据标准管理组织架构数据标准管理组织是企业建立的以推动企业数据标准化工作为目标，负责并落实开展数据标准管理工作全过程的组织体系。数据标准管理组织的设置应遵循数据资产管理组织体系的相关规定，并依据数据标准管理所涉及的不同工作职责，将数据标准管理组织划分为数据标准决策层、数据标准管理部门、数据标准工作组。 数据标准决策层是企业数据标准管理的最高决策组织，主要职责是组织制定和批准数据标准规划、审核和批准拟正式发布的数据标准、协调业务和IT 资源，解决在数据分类规划、体系建设、评审发布、执行落地中的全局性、方向性问题，推进企业整体开展数据标准化工作。 数据标准管理层是企业数据标准管理的组织协调部门，主要职责是根据业务需求，组织业务和IT 部门，开展数据标准落地工作组织业务部门和 IT 部门参与数据标准管理相关工作，并推进数据管理工作的进程，同时及时将数据标准管理过程中的成果或问题报决策层审批。 数据标准执行层是指具体开展数据标准编制和体系建设的数据标准管理部门，通常由数据标准管理专家、相关业务和IT 专家组成，主要职责是解决编制数据标准、推进数据标准落地工作中的各类具体业务问题和技术问题。 (二) 数据标准管理制度体系数据标准管理制度体系是指企业为开展数据标准管理工作而制定的一系列规章制度。数据标准管理的相关应遵循企业数据资产管理的相关制度和原则。数据标准管理制度主要包括数据标准管理办法文件、数据标准规范文件、数据标准管理操作文件。 数据标准管理办法文件：指企业制定的内部开展数据标准管理工作的工作办法。一般包括企业数据标准管理目标、数据标准管理组织中各部门的职责、数据标准管理各项工作的主要过程，以及开展数据标准管理工作的相关机制，如沟通汇报机制、审核机制、考核机制等内容； 数据标准规范文件：指企业已编制并发布的一系列数据标准文件，如客户数据标准、产品和服务数据标准、统计指标标准等文件； 数据标准管理操作文件：指各业务部门根据企业数据标准管理办法制定的，在本部门或本业务领域内开展数据标准化工作的具体实施文件。数据标准管理操作文件也可包含数据标准管理办法各主要过程配套的工作模板文件。 四、 数据标准管理挑战与建议(一) 数据标准管理的挑战当前，企业在推进数据标准化过程中仍然面临多困难和挑战，阻碍了数据标准管理工作，使得数据标准化的效果难以体现。这些挑战主要体现在以下几点：一是业务部门参与度不高。对于以IT 部门主导的数据标准管理工作，各业务部门参与度不高，导致数据的业务含义难以准确定义和统一，降低数据标准的可用性。二是技术实施不彻底。对于大多数已投运但未按照数据标准相关规定建设的系统，由于建设时间较早，运行时间较长，使数据标准在这些系统中的落地工作难以开展。三是数据标准管理周期长、见效慢。对于一套完整度和可用性较高的数据标准体系而言，由于数据标准应尽可能涵盖企业所有业务活动，使数据标准的编制、维护的工作复杂，数据标准管理的动力不足，影响数据标准管理工作的后期开展。 (二) 数据标准管理的实践原则数据标准管理工作应遵循机制先行、合理规划、贴近业务、循序渐进的实践原则。 高层负责，机制先行 数据标准工作应得到高层重视，并指定公司高层负责数据管理和数据标准管理工作，组织制定数据标准相关管理办法。应在企业内部建立专门的数据标准管理机构或工作组，负责数据标准管理的日常工作，并赋予管理权限和资源，同时可制定数据标准管理工作的考核要求。 明确定位，合理规划数据标准化是企业的基础性工作，短期内较难在每个应用上和业务上体现价值。企业应从长远出发，分阶段规划数据标准管理工作，明确各阶段的数据标准管理的优先级以及主要工作内容，确保数据标准管理工作的阶段性成果输出可作为下一阶段数据标准管理工作有效输入。 贴近业务，切合实际 企业应把握标准与业务需求的关系，标准来源于业务，服务于业务，是对业务的高度提升和总结。企业应分析业务现状，挖掘业务需求，引领业务部门的广泛、深入参与，更易获得业务部门的认可。数据标准应以落地实施为目的，并以在国家、行业标准的基础上，结合现有IT 系统的现状，以对现有生产系统的影响最小为原则编制和落地标准，才能确保标准切实可用，让标准最终回归到业务中，发挥价值。 循序渐进，成效说话 企业根据业务需求，结合系统改造和新建系统的契机，选择适当的数据标准落地范围和层次，对亟待解决的标准问题进行落地。同时，还需及时总结建立和实施数据标准对企业带来的价值和成效。 |
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
|
