首页 > 资讯 >正文

河北电力公司打响数据质量专项提升第二战役

2020-09-28 10:19:11 来源:- 作者:-

大数据技术从拥有大数据的地方产生,数据中台是一次数据技术上的整体提升,是企业数据化的一个整体架构,是企业数字化驱动双引擎。数据中台汇聚全域数据,向上支持数据应用。河北公司于2019年11月完成数据中台部署,截止目前,已接入一级部署系统13套6746张表、二级部署系统13套7764张表,接入数据总量约46TB。数据的可靠性和实用性,直接影响到统计分析是否得到正确的结论,数据的质量尤为重要。河北公司强化专业协同、聚焦问题分析、自主研发工具,采用强有力的手段,提升数据质量,打赢数据质量专项提升战役。

强化专业协同,保障工作质量

河北公司成立由省互联网部牵头、业务部门协同的数据质量提升专项工作组,下设中台组、业务应用组、平台保障组,涉及人员48人,合理调整办公区域,组织开展常态化集中办公,有效降低沟通成本、形成工作合力。制定数据质量专项提升行动方案,建立“日整改、周提升、月评价”的工作机制,实行问题清单化,确保问题闭环管理。

强化问题分析,聚焦关键环节

盘点数据质量问题,围绕数据溯源、数据接入、数据整合、数据上传梳理出16类数据质量问题,涵盖业务主键重复、存在非生产数据、主键缺失、更新标识缺失、更新时间缺失、上传时效延迟等问题,针对每类问题研讨形成整改策略。

强化工具研发,提升自动化水平

研发数据质量核查脚本,基本实现中台数据质量问题核查全自动化,核查并整改数据质量问题136条,实现数据问题清零。开发中台数据核查结果BI展示画面,基于数据中台接入、整合、上传及数据质量核查结果数据,实时导入BI展示工具进行结果实时在线分析展示,支撑数据状态监测及问题分析跟踪处理。

未来,将进一步整合提升数据核查治理自动化工具,提升自动化治理水平;持续夯实数据治理协同机制,提升源端、中台、应用全链路数据治理效率,高质量支撑应用,高水平开展数据中台运营。(刘明硕 赵梦瑶

责任编辑:小林