上海品茶

您的当前位置:上海品茶 > 报告分类 > PDF报告下载

1-董亭亭-快手基于Apache  Flink的持续优化实践-TSY.pdf

编号:29291 PDF 24页 1.45MB 下载积分:VIP专享
下载报告请您先登录!

1-董亭亭-快手基于Apache  Flink的持续优化实践-TSY.pdf

1、快手基于Flink的持续优化与实践 董亭亭 / 快手实时计算负责人 Flink 任务启动优化 #2 Flink 稳定性持续优化 #1 Flink SQL实践与优化 #3 未来工作 #4 Future Work Practice and optimization of Flink SQLStartup optimization of Flink jobOptimization of Flink job stability Flink稳定性持续优化 #1 Optimization of Flink job stability Flink Kafka Connector高可用 Connector支持

2、双机房读 Connector支持双机房写 Sink容忍一定比例数据丢失 一键丢弃历史lag Flink任务故障恢复 宕机故障快速发现 故障恢复加速 Flink稳定性持续优化 #2#1 Flink Kafka Source高可用 IDC1IDC2 Topic1 Topic1 Source1Source1 Map Sink Flink Job 生产者 Union 自动分流 kafka 双集群高可用 双集群Topic共同承担全部流量 单集群故障,上游自动切流 Flink任务不具备kafka双集群高可用 两个Source union方式消费 Source分别感知上游topic故障 单集群故障,手动将故

3、障Source摘除 背景 IDC1IDC2 Topic1Topic1 Cluster Source Map Sink Flink Job 生产者 自动分流 Flink Kafka Cluster Source 支持读取双集群topic 可以容忍单集群故障 集群故障恢复时自动加入 Flink Kafka Source双集群高可用 Flink Kafka Source高可用 IDC1IDC2 Topic1Topic1 Source Map Sink1 Flink Job Sink1 双集群topic Flink写双集群kafka topic 定义不同集群Sink 逻辑内控制拆流,灵活性差 不能容忍单机房故障 单集群故障,手动摘除对应Sink 背景 Flink Kafka Sink高可用 IDC1IDC2 Topic1Topic1 Source Map Flink Job Cluster Sin

友情提示

1、下载报告失败解决办法
2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。

本文(1-董亭亭-快手基于Apache  Flink的持续优化实践-TSY.pdf)为本站 (X-iao) 主动上传,三个皮匠报告文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知三个皮匠报告文库(点击联系客服),我们立即给予删除!

温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。
会员购买
客服

专属顾问

商务合作

机构入驻、侵权投诉、商务合作

服务号

三个皮匠报告官方公众号

回到顶部