1、从数据要素到数据生产力全链路数据治理的智能演进贾扬清阿里巴巴集团副总裁阿里云智能计算平台事业部高级研究员达摩院 AI 平台负责人政务电力互联网新零售金融制造汽车工业归集治理329亿多条公共数据，全省政务服务事项100%网上可办，一张身份证通办352项事项，实现群众办事“最多跑一次”一朵云多Region，两级管控的数据中台，为27家网省公司、40家直属单位提供全量数据接入、存储、处理及分析服务万亿级别数据下的全链路数据治理，数据平台因为数仓开发引起的小事故降低60%，数据产出100%及时，成本治理每月降低20%15天完成400TB+数据上云，构建新零售数据中台体系，支持线上B2C业务日均可达30
2、-40万单，B2B业务日均近1万单，敏捷迭代多种线上业务模式接入247个业务系统，110万张表，实现百万级表实时入湖。保险代理人业务实时并发从2000人级别提高到20万人汇聚74个系统、1.2万亿条业务和生产数据，半年内构建了11个一级主题域和40+二级主题域的数据中台，收到内部60多个上层数据应用开发申请梳理企业内部12大领域的1200+报表与3000+指标，逐步培养40+人数据中台团队，收到供应链、产品研发、车联网等业务领域600+数据应用需求全链路数据治理提高数据中台可用性，综合成本削减1亿元。提高业务迭代效率，数据更新频率由1天变成10分钟，新需求上线由1周变成1天数据要素成为数字经济
3、的核心引擎不断增长的地上悬河对于堤坝加固及洪水治理的压力阿里巴巴不断增长的数据量对于数据成本及效率的压力版本管理指标多义性质量监控安全管控黄 河黄 河 大堤7米数据悬河企业数字化转型的深水区数据量/机器/人都变多了，企业的数字化就变好了吗？050002001820192020MaxCompute 双11单日数据处理量（PB）2021年日常水位线1.7EBMaxCompute单日处理数据5.3万DataWorks阿里数据中台月活跃用户数10+亿元FY2020数据治理综合收益5.96亿条Hologres每秒写入90004200520
4、05600当日存储（PB）200021.61850%单日作业量（百万）50%201520162017 201820192020 2021.600202021.618单日处理数据量（PB）75+%200021.618集群总服务器规模（万台）10+%200021.618阿里巴巴大数据现状数据效率成为核心指标机器的效率+人的效率=数据效率积木型工具组件有什么用什么按下葫芦浮起瓢小作坊一站式数据开发数据开发/产出的效率DataW
5、orks支持阿里数据中台建设大平台全链路数据治理数据质量/数据利用率数据决策下放敏捷制造数据的敏捷制造，让数据要素释放生产力DataWorks全链路数据治理的智能演进数据治理健康分计算治理项研发治理项质量治理项安全治理项数据治理战役数据治理团队比武数据人才培养数据规范迭代数据组织协同联动全链路数据治理的三个方向组织主动性组织如何衡量数据治理的最终效果或指标？考核指标长效运营组织架构数据委员会数据治理小组数据平台团队引擎接口人开发平台接口人业务线治理团队业务线治理接口人数据开发接口人协同团队财务接口人风控接口人存储治理项全链路数据治理的三个方向-平台智能化EX：如何构建完整的数据质量体系？事前规
6、则智能阿里巴巴700多万质量规则，每天新增1万多条DataWorks自带37种数据质量规则智能质量规则推荐，采纳率达75%事中调度智能700万条规则耗费大量计算资源，影响数据的计算产出DataWorks质量任务调度关联计算引擎资源数据计算后自动触发质量任务，智能的优先级/空闲策略事后判断智能周末/节假日/大促质量波动远超固定规则DataWorks动态阈值剔除噪声数据顶会论文技术，基于历史数据自动判断数据质量波动阈值困难平台智能化可理解数仓规范建设智能数据建模自助取数分析可溯源数据产出告警模型指标血缘数据指标管理可管控数据分级加密数据合规审计风险行为识别全链路数据治理的三个方向-业务可用性如何保障数据稳定、统一、安全地流通？DataWorks全链路数据治理让数据从低质低效向高质高效流动百花齐放的大数据引擎MaxCompute、交互式分析Hologres、E-MapReduce、CDP、实时计算Flink版、机器学习PAI、AnalyticDBDataWorks全链路数据治理智能数据建模全域数据集成高效数据生产主动数据管理全面数据安全快速数据服务千行百业的数据应用数字政府、新金融、新零售、能源、工业、交通游戏、教育、数字营销全链路数据治理让数据向先进生产力集聚THANKS
sgpjbg002
工作日 8:30 - 17:30
报告分类
