腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

数据工匠俱乐部 2019/09/12 10:22

导语

9月5日“DQMIS2019第三届数据质量管理国际峰会”在北京召开。腾讯游戏农益辉和刘天斯作为数据质量管理专家应邀出席。腾讯游戏大数据管理团队荣获2019年度“数据质量卓越实践奖”,并开展“腾讯游戏数据质量管理实践”主题演讲。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

9月5日,由北京大学、国家电网全球能源互联网研究院有限公司作学术支持,北京华矩管理咨询有限公司、数据质量管理智库主办,大数据技术标准推进委员会、时代传媒联合主办的 “DQMIS2019第三届数据质量管理国际峰会”在北京隆重召开。

腾讯游戏农益辉和刘天斯作为数据质量管理专家应邀出席。腾讯游戏数据质量管理实践从数十家企业申报中脱颖而出,荣获2019年度“数据质量卓越实践奖”。腾讯游戏大数据管理负责人刘天斯在大会上展开了主题为“腾讯游戏数据质量管理实践”的演讲分享。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

【腾讯游戏数据质量管理“数据质量卓越实践奖”奖杯和证书颁发】

腾讯游戏数据质量管理实践从数十申报中脱颖而出,荣获2019年度“数据质量卓越实践奖”,于大会现场颁发获奖证书和奖杯。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

【“腾讯游戏数据质量管理实践”主题演讲】

大会现场,腾讯游戏大数据管理负责人刘天斯在会上展开了主题为“腾讯游戏数据质量管理实践”的演讲分享。刘天斯老师指出,腾讯游戏每日的数据量占据了整个集团约20%+的规模,数据质量问题尤为突出,并基于这个背景深入介绍了腾讯游戏在数据质量管控过程中的实践探索历程,分别从解决数据孤岛、数据标准与集成、监控体系建设及血缘体系构建等方面,进行了全面的介绍。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

【腾讯游戏数据质量管理体系介绍】

腾讯游戏数据质量管理体系建设,基于元数据管理,经过的路径有统一数据服务职能、数据标准与集成管理、数据质量监控和数据与业务血缘建设。遵循规避问题、发现问题和解决问题的方法,并通过标准规范、流程管控和技术的组合手段,一同保障数据的高质量,从而提升游戏数据服务的质量,助力业务获得更强的市场竞争力。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

1、多元开放的自动化元数据管理,通过描述技术与业务数据的属性,帮助数据访问者更好理解与使用数据,辅助业务运营。如下图所示,覆盖多种类型元数据信息,丰富全面;包含多种维度指标信息,方便平台用户全面了解数据;全自动化变更流程,元数据更新更及时、准确;丰富的元数据服务接口,数据开放满足更多应用场景。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

2、强通用性的数据标准管理,在数据标准服务上,主要有数据项标准和指标项标准,数据项标准是规范化定义业务、技术和管理相关属性,业务属性,就比如业务数据的表结构信息,技术属性就比如业务上报数据的格式,管理属性就比如数据上报和变更流程是如何进行。指标项标准包含指标命名、指标值域和生成逻辑,方便下游环节对数据使用的理解。制定具有通用性的日志规范和建设统一的接入管理平台,通过流程管控的方式来实施,从源头上尽可能规避数据质量问题。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

3、全链路多维度的数据质量监控,提供游戏数据从采集、传输、接入以及计算的全链路质量保障。数据质量是否出现问题,需要通过监控来验证,我们建设有全链路多维度的数据质量监控,覆盖从数据采集、传输、存储和计算,再到数据应用的整个链路,在监控维度上有设备基础监控、服务心跳监控、数据对账和掉零监控,以及字典变更、计算延迟等监控,尽可能无死角覆盖到所有可能出现的问题点,并制定数据质量检查规则,保障数据质量的完整性、一致性、准确性和及时性。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

4、数据与业务血缘建设,通过记录或上报数据访问流向生命周期,建立血缘关系链,便于快速问题定位及影响评估。如下图所示,通过贯穿数据血缘与业务血缘,建立数据服务完整血缘关系链,存储于元数据血缘数据库;利用血缘关系链树,快速实现异常回溯及影响评估,确保数据交付高质量。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

总结

腾讯游戏数据质量管理建设,在企业内,服务于腾讯400+款游戏,打造立体化、多层次的游戏数据质量管理体系,在行业内,作为数据资产的核心部分,获得中国信通院颁发“最佳数据资产管理实践奖”,同时在数据质量上,也通过DCA数据管理平台能力测评。未来,我们将继续深化数据质量管理的建设,打造行业数据质量的新标杆。

新知图谱, 腾讯游戏应邀2019数据质量管理国际峰会| 荣获“数据质量卓越实践奖”

扫描二维码关注我们

微信:DaasCai

邮箱:ccjiu@163.com

QQ: 3365722008

数据工匠俱乐部
+ 关注

更多新知