2021 DTCC 专场13-数据治理(PPT)

2021-10-23 00:00:00 数据 治理 分享 落地 快手

多模态数据融合治理实践

演讲简介:

数据治理是数据应用的基础,推动数据治理体系建设一直是业界探索的热点。面对数据多样化、数据需求个性化、数据应用智能化的需求,如何做好数据治理工作、提升数据治理能力是政府和企业数字化转型的重中之重。

针对目前异构数据整合难的问题,百分点科技在数据治理中引入了NLP、动态知识图谱、智能交互式分析等技术,本次演讲将基于其在多个PB级、多源异构数据源的复杂场景下的数字政府数据治理项目落地成果,分享数据治理“PAI”实施方法论,即流程化(process-oriented)、自动化(automation)、智能化(intelligence),介绍针对数字政府建设中的多模态数据,如何更好地开展数据治理工作、建立全域数据标准、提升数据质量、盘活数据资产,以及支撑数据融通,终释放数据价值,指导业务创新。

分享提纲:

首先,介绍数据治理体系框架及落地实施标准工序。

其次,详解“PAI”实施方法论中自动化及智能化的具体工序。

后,以数字政府数据治理成功项目为例,讲解智能化落地情况。

分享要点:

首先,分享数据治理整体体系框架,针对技术执行体系提出数据治理4大能力构建及数据治理实施20道标准工序。

其次,针对20道标准工序分享“PAI”实施方法论,讲解20道工序中自动化处理和智能化处理流程。

后,针对数字政府数据治理中多模态数据,具体讲解如何借助NLP及机器学习等技术实现智能化流程。


马伟凯 北京百分点科技集团股份有限公司 数据开发部负责人

嘉宾介绍:

百分点项目总监,智慧政务数据开发部负责人。负责百分点数据中台及数据治理类项目,及智慧城市、数字政府、应急、生态环境领域项目交付实施,擅长项目管理及数据治理全流程实施,负责梳理并完善百分点数据治理实施方法论。对各行业痛点、数据治理人才技能及数据治理人才需求有深入研究。


快手数据治理实践 - 基于评估体系实现可持续治理

演讲简介:

数据治理一直以来是每个公司大数据体系中非常重要的一个方向,特别是近几年业界也越来越重视,但是在实际推进治理工作的过程中,都会或多或少遇到很多问题和挑战,本次分享重点介绍快手在落地数据治理体系的过程中,遇到的诸如问题缺少标准化、治理缺少量化、治理动力不足等问题,基于这些问题如何通过一套标准化的治理评估体系来解决的,并终实现治理的可持续。

分享提纲:

a.数据治理背景介绍

分享要点:为什么需要进行数据治理,以及在快手实践数据治理过程中遇到了哪些问题

b.介绍在快手如何通过量化评估体系解决治理的一系列问题

分享要点:基于治理遇到的问题我们在快手实践了一套量化评估体系,包括如何量化数据资产,如何量化治理收益,以及如何结合运营手段来落地,终实现可持续化的治理

c.介绍在快手数据治理实践过程的收益以及未来的规划

分享要点:在快手治理实践过程中,我们落地了平台化的治理能力,也取得了阶段性的治理收益,对于现阶段不足点也制定了相应的规划


孙伟 快手科技 数据管治团队负责人

嘉宾介绍:

10年大数据研发经验,曾任职于百度、阿里数据团队,目前为快手数据管治负责人,过去一直专注于数据架构和数据资产管治方向,加入快手后,从0到1搭建了资产管治体系,推进了数据标准化和质量保障体系的落地,主导和协同多个团队深入开展数据治理工作,大幅提升了数据质量和降低了数据成本。


货拉拉大数据平台的稳定性治理实践

演讲简介:

货拉拉每年业务飞速增长并面临了全球化的业务场景,带来了大量的大数据智能的需求与挑战。本分享从货拉拉的实际落地经验出发,以真实案例为基础,系统的阐述了大数据场景下的稳定性保障落地实践和方法论,包含能力保障、流程规范保障和组织保障三方面内容,重点讲解面向年均几倍业务增长下的系统容量规划、链路高可用和故障隔离等实践思路,后达到数据可靠性、数据准确性、核心数据链路稳定性和在线服务稳定性等系统多方位的保障能力。 

分享提纲:

1. 背景和挑战

- 货拉拉介绍和大数据面临和挑战

- 大数据场景下稳定性保障的共性和特殊性

- 大数据场景下场景多样性(在线/实时/离线)带来的保障复杂度

- 开源软件基本能力和生产需求之间的巨大差距

2. 稳定性治理落地实践

2.1治理能力 

- 容量规划

- 链路高可用

- 故障隔离

2.2治理相关流程规范

- 研发和发布规范

- 故障管理规范

2.3治理组织保障

- SRE Team

3. 总结和思考

分享要点:

首先介绍下货拉拉公司、货拉拉大数据现状和作为背景,以及大数据场景下稳定性面临的3方面的挑战;

其次总结需求,制定目标,并且分为3方面进行治理以达到目标:分别是治理能力、治理制度和规范、治理组织保障三个部分;

后做下总结和思考。


王海华 货拉拉 大数据基础架构负责人&架构师

嘉宾介绍:

王海华,货拉拉大数据架构师/基础架构负责人,现在负责公司大数据部门整体稳定性/安全/国际化和架构团队。曾在滴滴/饿了么/拼多多经历和负责过几千到几万台的超大规模数据平台架构。6年以上大数据架构经验,主要研究方向是大数据安全、大数据平台产品和系统架构、计算机体系结构和分布式系统等,在以上领域具备大规模的落地实践经验。


相关文章