星顺科技为企业提供专业化的数据治理质量体系咨询服务,依据DCMM(数据管理能力成熟度评估模型)相关条款,为企业构建覆盖数据全生命周期的质量管理体系,以确保数据的准确性、有效性、唯一性、一致性、完整性和及时性。
我们的服务能够帮助企业

制定数据质量评估指标
设计数据质量检查规则

设计数据清洗方案
构建数据质量分析模型

建立质量问题处理流程
制定数据质量改进计划

完善数据质量考核机制
实施提升数据质量
数据质量问题产生的原因
数据质量问题的主要原因集中在经营管理、业务应用和技术操作3个方面

经营管理方面
缺乏有效管理策略
缺乏统一的数据标准

业务应用方面
数据需求不清晰
录入数据不规范

技术操作方面
数据设计问题
数据传输问题
数据质量管理策略

提升数据质量,是数据治理活动的核心目标
任何质量问题的改善都是建立在评估的基础上的,知道问题在哪里才能实施改进。

加强组织保障

落实数据标准

制度流程保障
数据的质量维度

准确性

有效性

唯一性

一致性

完整性

及时性
数据质量规则定义
数据质量规则 | 质量维度 | 检查对象 | 数据质量规则说明 |
---|---|---|---|
不可为空 | 完整性 | 单列 | 数据项不允许为空值 |
语法约束 | 有效性 | 单列 | 数据项满足数据标准规定的取值范围 |
格式规范 | 有效性 | 单列 | 数据项必须满足展现格式约束 |
长度约束 | 有效性 | 单列 | 数据项必须满足约定的长度范围 |
值域约束 | 有效性 | 单列 | 数据项必须满足已定义的枚举值约束 |
事实参照标准 | 准确性 | 单列 | 存在事实数据或标准数据,与该事实或标准对比一致的约束 |
应为空值 | 完整性 | 跨列 | 数据项在某种条件下不应填写 |
填写及时 | 及时性 | 跨列 | 数据进入系统的及时性约束 |
单表等值一致性约束 | 一致性 | 跨列 | 某数据项与其数据实体的其他属性计算值相等的约束 |
单表逻辑一致性约束 | 一致性 | 跨列 | 某数据项与其数据实体的其他属性满足逻辑关系约束(大于或小于) |
记录唯一 | 唯一性 | 跨行 | 记录不重复,是对数据集内部是否存在相似或重复记录的约束规则 |
层次结构一致的约束 | 一致性 | 跨行 | 存在层级结构的数据项,同层级的数据项结构一致 |
… | … | … | … |
数据质量的检查方法
记录数检查法
检查数据表的记录数
关键指标分析法
对比关键指标数据量
历史数据对比法
对比历史数据观察变化
值域判断法
观测数据合理变动区间
经验审核法
人工经验审核
匹配判断法
对比验证,判断数据有效性
数据质量管理流程
