数据质量管理的数据质量管理

数据质量包括数据质量管理和数据治理两个大方向。数据质量管理是一种为了满足企业对于数据的需求，对各种业务活动产生的数据进行规范存储，然后通过ETL方法处理后把不同来源数据统一储存在数据仓库中的过程。

一、数据质量管理

数据质量管理不是短期内就能完成数据处理，提高数据质量的工具，也不是一种数据类的技术，更不是一个软件系统，而是一种长期循环持续的管理活动体系，是包含着方法论、业务和管理的数据类技术解决方案。

1.数据规划

企业管理人员必须先确定好数据质量管理体系的顶层设计，从思维的方向出发把企业文化变成数据驱动型文化，然后提前做好数据规范，将其融合到企业的KPI指标中，利用奖惩制度监督员工，把数据确立为企业的基石。

2.数据存储

部署商业智能BI，将企业原本拥有的业务信息系统以及其它不同来源的数据统一连接到数据仓库中，再经过ETL过程处理后，企业的数据质量就能飞速提高。

数据可视化-派可数据商业智能BI

3、

数据分析人员可以通过派可数据BI中的可视化分析功能，从图表直连数据仓库取数，实现流程的自动化，避免出现其他干扰，然后通过联动、钻取等功能实现不同图表之间的互动，深化可视化分析报表展现的数据量和深度。

4.形成闭环

业务活动产生数据，分析人员利用数据判断出业务发展趋势，辅助管理人员对业务发展进行决策。在这么一个不断优化的闭环流程中，数据质量将会不断提高，逐渐将企业数据精细化到极致，进而产生变革。

二、数据治理

数据治理是一种提高数据质量的手段，最后还是要回到业务本身，实现落地，对于企业来说，能够对业务活动进行量化处理，并以数据的形式展现出来，是数字化时代现代企业的重要标志。

数据可视化-派可数据商业智能BI

数据治理的目标其实就是不断提高业务数据的质量，增强数据的可信度，减少错漏。对于企业管理人员来说，数据就是他们了解企业整体发展状况最重要甚至是唯一的渠道。

数据治理的目标不仅是优化提效，更是涉及决策发展，关乎企业发展的关键。由此，我们可以初步确定数据治理的目标。

完整性：规范业务流程，完善数据库数据模型；

准确性：增加数据质量考核标准，建立奖惩制度；

及时性：优化数据存储调取时间，提升取数分析效率；

一致性：确定数据指标体系，确保数据和业务相对应；

唯一性：添加数据查询索引，避免数据库数据重复。

派可数据 商业智能BI可视化分析平台

加强金融信用信息基础数据库数据质量管理的通知是2018年印发，市场经济是信用经济，完善的信用体系是发展市场经济的基础。随着市场经济的深入，信用缺失的瓶颈制约问题日益显现。近期，国务院印发《关于建立完善守信联合激励和失信联合惩戒制度加快推进社会诚信建设的指导意见》，以守信激励和失信惩戒机制建设为核心，通过“褒扬”与“惩戒”双重手段，约束经济主体不愿失信、不敢失信，营造公平诚信的市场环境，加快推进社会信用体系建设。

一、质量保证控制体系

在数据库建设过程中，各工作单位和计划项目综合组均制定了相应的质量保证体系和措施，从资料的来源、整理录入、检查汇总层层严格控制。质量保证控制体系内容包括：质量保证组织体系和质量保证制度体系，组织体系和制度体系又由承担单位和计划单位综合项目组两套体系组成。承担单位按照本单位全面质量管理制度和办法建立了以全面质量管理办公室、项目组和工作组为核心的质量保证组织体系以及完整的质量管理制度体系。以计划单位为核心的综合项目组的质量保证组织体系是由计划项目负责人、工作项目负责人和工作组构成。建立了三级质量检查监控体系：一是数据库工作人员的自检和互检；二是承担单位项目组组织的质量抽检；三是计划项目综合组组织的阶段性质量抽检和验收。在各级检查过程中，对发现的问题都做了详细的记录，并进行了认真修改，保证了录入资料的准确性。

二、质量保证措施

（一）属性数据的质量保证措施

属性数据就是要真实地反映原始资料，质量保证措施最主要的就是质量检查、核对，形成录入→检查→修改→补充→汇总五个步骤的工作流程。每一项内容录入完成以后，录入人员必须将录入数据与原始数据进行校对，自检率为100%，发现问题及时解决之后，再开始下一项数据的录入。工作每告一段落，要进行互检，互检率也是100%；同时承担单位项目组进行质量抽检，抽检率为30%～50%；计划项目综合组的阶段性质量抽检和验收，抽检率为20%～30%。数据库工作人员平时工作有记录，每次检查有记载，发现的问题修改情况也有记录，做到出问题有据可查，责任有人承担，确保数据录入的准确和可靠。同时，还制定了安全防范措施，即防计算机病毒破坏、防数据库数据误删除、防蓄意破坏。

（二）图形数据的质量保证措施

1.地理底图质量保证措施

本次使用的数字地理底图是国家测绘局1∶25万地理要素图，利用Map GIS的裁剪功能以松嫩平原界线为范围边界裁剪而成，图层要素有外图廓、经纬网、境界线、水系、公路、铁路、等高线、高程点等，并依据2005年11月中国地质调查局颁发的《1∶25万地理底图编辑要求》和水环所提供的图库进行了修编。原地理底图自带图库与水环所提供的图库有很大差别，都按图层及图元参数一一替换图案号及更改参数，保证了更换图库前后地理底图所示内容的一致性。

2.成果图件数字化质量保证措施

成果图件均由编图人员在喷绘的地理底图上绘制，然后采用300 dpi以上的分辨率进行扫描，提高了栅格文件的清晰度，减小了误差；制图人员利用Map GIS将图像配准到已矢量、修编好的地理底图上，所有经纬网交叉点都作为控制点采集对象，保证了图像配准的精度；矢量过程中窗口放大到40倍，鼠标跟踪输入；各类成果图件中松嫩平原边界在空间上严格重合，在面元建立拓扑时，不能作结点平差，分区线元与边界相交处分区线元用延长靠近母线、母线加点功能，在此基础上建立拓扑关系形成面元，保证了公共边界线元空间拓扑的一致性；对不同成果图件有相同要素的，要将其单独提取图层，根据图件要求予以增加，保证了不同图件中相同内容的一致性。通过上述工作方法，使图件数字化质量得到有效的控制。

矢量化后，喷出彩图检查图元信息，图元信息检查是保证图形数据质量的关键，这项检查工作以自检为主，检查都在两遍以上。图形属性数据通过MAPGIS属性管理系统输入完成，其属性字段按照《地下水资源调查评价数据库标准》要求填写。

3.提高数据库工作人员的质量意识

人是保证质量的主动因素，提高数据库工作人员的质量意识是保证数据库质量的重要措施，因此在数据库建设过程中，无论是承担单位，还是综合项目综合组都开展了提高质量意识的重要性教育，使每一个工作人员在思想上重视数据库质量，在行动上保证数据库质量。

---