|
政务数据治理标准流程（收藏）： 0、数据处理主要包括数据清洗、比对、转换、合成、加载等过程。 1、数据清洗。提供清洗规则设置、清洗过程监控、异常反馈等功能。对于来自数据管理中心的数据，直接存入基础数据库，不做清洗；对于其他来源数据，根据数据资源目录制定数据清洗规则，主要通过是否为空，及信息长度、类型、格式等判断，自动将错误信息清除。 2、数据比对。提供数据比对规则配置、字段关联、比对日志等功能。以权威部门数据为标准进行核查比对，如公安的人口；对如自然人中的姓名、性别、出生年月等信息是否符合相关规定等进行合归性比对。 3、数据加载。提供制定加载规则、加载模式设置、定时加载等功能。对于初次加载的数据库或出现数据目录重大调整，使用基本加载方式，将对整个数据仓库进行数据加载；对于已加载数据的数据库，使用增量加载方式，在保存已有数据基础上增加新数据（主键匹配时可选择替代旧记录）。  |
|
|
