数字化时代来临,数据治理人才缺口巨大。数据治理都包含哪些内容,数据治理人才如何培养呢?小编为大家整理了数据治理行业含金量高的证书,大家可以了解和学习。
数据治理包含的内容:
广义上讲,数据治理是对数据实现全生命周期管理。只要是为整个数据生命期而展开的业务、技术、管理活动,都属于数据治理的范畴,包括但不限于传统数据集成和存储环节的工作(如数据采集、清洗、转换等)、数据资产目录、数据标准、质量、安全、数据开发、数据价值、数据服务与应用等。具体工作如下:
1、数据资源梳理
从业务的角度理清组织的数据资源环境和数据资源清单,包含组织机构、业务事项、信息系统,以及以数据库、网页、文件和 API 接口形式存在的数据项资源,本步骤的输出物为分门别类的数据资源清单。
2、数据采集清洗
通过可视化的 ETL 工具将数据从来源端经过抽取 (extract)、转换 (transform)、加载 (load) 至目的端的过程,目的是将散落和零乱的数据集中存储起来。
3、元数据管理
元数据管理是对基础库和主题库中的数据项属性的管理,同时,将数据项的业务含义与数据项进行了关联,便于业务人员也能够理解数据库中的数据字段含义。
4、基础库与主题库建设
基础数据一般指的是主数据,例如智慧城市中的人口、法人、地理信息、信用、电子证照等数据。主题数据一般指的是某个业务主题数据,例如市场监督管理局的食品监管、质量监督检查、企业综合监管等数据。基础库和主题库的建设就是在对业务理解的基础上,基于一定的原则设计数据库表结构,然后再根据数据资源清单设计数据采集清洗流程,将整洁干净的数据存储到数据库或数据仓库中。
5、数据质量管理
数据价值的成功发掘必须依托于高质量的数据,唯有准确、完整、一致的数据才有使用价值。因此,需要从多维度来分析数据的质量,例如:非空检查、偏移量、规范性检查、值域检查、关联关系检查、重复性检查、波动检查、离群值检查等等。
6、数据血缘追踪
在元数据和数据资源清单之间建立关联关系,且业务团队使用的数据项由元数据组合配置而来,建立数据使用场景与数据源头之间的血缘关系。在数据被业务场景使用过程中,发现错误时,数据治理团队可以快速定位数据来源,修复数据错误。
7、数据资源目录
数据资源目录一般应用于数据共享的场景,例如政府部门之间的数据共享,数据资源目录是基于业务场景和行业规范而创建,同时依托于元数据和基础库主题而实现自动化的数据申请和使用。
8、数据共享交换
数据共享分为库表、文件和 API 接口三种共享方式,库表共享比较直接粗暴,文件共享方式通过 ETL 工具做一个反向的数据交换也就可以实现。我们比较推荐的是 API 接口共享方式,在这种方式下,能够让中心数据仓库保留数据所有权,把数据使用权通过 API 接口的形式进行了转移。API 接口共享可以使用 API 网关实现,常见的功能是自动化的接口生成、申请审核、限流、限并发、多用户隔离、调用统计、调用审计、黑白名单、调用监控、质量监控等等。
数据治理的权威认证有哪些?
目前大数据行业的权威认证有CDGA数据治理师,CDGP数据治理专家,DGSP数据治理与管理,CBIA商务智能分析师,IBM数字人才战略领导力等。
CDGA数据治理工程师、CDGP数据治理专家是DAMA国际数据管理协会认证证书,是数据治理从业者的“黄金证书”。
考试类型 | 报考条件 |
数据治理工程师(CDGA) | 在校大学生,或专科及以上学历获得者 |
数据治理专家认证考试(CDGP) | 博士学位获得者 |
硕士学位获得后,从事IT相关工作1年以上者 | |
本科毕业后,从事IT相关工作3年以上者 | |
专科毕业后,从事IT相关工作5年以上者 |
DGSP数据治理与管理,CBIA商务智能分析师是ICCP计算机专业人士协会的两个权威认证证书。
ICCP认证的价值
1.ICCP是世界范围内商业、数据、计算领域时间最/长、规模和影响力最/大的专业认证机构。
2.ICCP建立了一套科学、严谨的认证标准和流程,即从岗位定义出发,到岗位所需的知识、技能和经验,到如何命题测试相关的知识和技能,再到考试结果分析,并形成闭环,不断迭代和完善。
3.ICCP的证书代表着世界先进数字认证产品。拥有这些认证(特别是专家级别)的专业人士,标志着拥有数字时代的战略思维视角、了解和掌握了数字技术的相关知识、技能以及商业运营模式,因此在组织内部会获得更多机会推动数字化变革和转型。
4.ICCP认证在世界数字化头部企业,如苹果、微软、谷歌、IBM、亚马逊、华为等得到广泛认可和尊重。
DGSP、CBIA考试要求、考试条件及考试费用
DGSP/CBIA | 专家级 | 中级 |
每科内容 | 12个模块 | 12个模块 |
考试题目 | 110题/科 | 110题/科 |
通过要求 | =>70% | <70%,=>50% |
考试时间 | 120分钟 | 120分钟 |
考试方式 | 中英文对照计算机考试 | 中英文对照计算机考试 |
工作经历要求 | 本科4年以上* | 本科2年以上* |
考试费用 | DGSP: 2950元 CBIA: 2100元 | DGSP: 2950元 CBIA:2100元 |
* DGSP 要求1400个小时数据相关的工作经验。
易佳咨询大数据治理培训课程2023年招生中,CDGA数据治理工程师、CDGP数据治理专家、DGSP数据治理与管理、CBIA商务智能分析师、IBM数字人才战略领导力课程等你来学习。