上海品茶

您的当前位置:上海品茶 > 报告分类 > PDF报告下载

【15-B04】潘澄-基于 Flink 的滴滴实时数仓实践.pdf

编号:29327 PDF 30页 2.10MB 下载积分:VIP专享
下载报告请您先登录!

【15-B04】潘澄-基于 Flink 的滴滴实时数仓实践.pdf

1、基于 Fl nk 的滴滴实时数仓实践 ? ? 业务&践 ? ? ? 整体概况 ? ? ? 平台&引擎 ? ? ? 总结反思 ? ? ? 未来规划 ? ? ? 整体概况? ? ? 建设历程 ? ? ? ? ? ? ? ? ? 需求驱动 分散建设 统一规划 规范建设 业务实践 经验沉淀实时数仓 平台引擎 现状 ? )标作业 ? 资源(量(Vcores) 业务实践? 数仓分层 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 延迟消费 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 利用OLAP特性 ?

2、 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 数据校验 ? ? ? ? ? ? ? ? ? ? ? ? ? ? 体系架构 数据体系 建设规范 一站式开发平台 计算引擎 ? 数据源 ODS DWD DWM APP 数/链路 ? ? ? ? ? ? ? ? ? ? ? ? ? 多流join 开窗汇总 清洗去重 ODS层 DWD层DWM/DM层 ? ? ? ? ? ? ? ? APP层 ? ? ? ? ? 业务展现活动观察风险监控数据特征 ? ? ? ? ? ? ? ? ? ? ? ? ? ? 数据应用 数据应用 引擎&平台? 13架构 DC1 ? ? DC2DC3 ? ? ? ?

3、? ? ? ? 平台引2 逻辑集群统一 二级资源A离 多物理集群 定制YARN调度器 Flink引擎优化 ? 一站式开发平台 ? ? ? ? 一站式开发平台 ? ? ? 总结反思? 为什么要做 技术升级规范建设 规范建设 业务诉求实时数仓 ? ? ? ? ? ? 技术升级 ? ? ? 业务诉求 为什么这样做 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 重要事项 ? ? ? ? ? ? ? ? ? 离线&实时数据&对 ? ? ? ? ? ? ? ? ? 数据沉淀 ? ? ? ? ? ? ? ? ? 质量保障 指标 视角 上游 频繁变化快速更新 经常切换 需求 不确定 快速发展的业务? 未来展望? 统一建设 规范落地 血缘&元数& 批流一体 ? ? ? ? ? ? ? ? ? ? 未来展望 ? ? ?

友情提示

1、下载报告失败解决办法
2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。

本文(【15-B04】潘澄-基于 Flink 的滴滴实时数仓实践.pdf)为本站 (X-iao) 主动上传,三个皮匠报告文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知三个皮匠报告文库(点击联系客服),我们立即给予删除!

温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。
会员购买
客服

专属顾问

商务合作

机构入驻、侵权投诉、商务合作

服务号

三个皮匠报告官方公众号

回到顶部