1、小红书MySQL跨云高可用架构演讲人:曹单锋目录 从MHA到Orchestrator 从同城双活到跨云多活 MySQL跨云高可用实践小红书数据库现状单机房主从+MHA自研数据库代理Myhub2018年初,Mongodb往MySQL迁移单表数据几十TB业务技术栈不统一(多语言)竞品:Mycat/ProxySQL/DBProxy,TiDB自研数据库代理Myhub特性特性分库分表读写分离连接收敛节点探活节点自动隔离SQL拦截SQL审计多机房就近读全局二级索引MHA+Myhub改进点改进点引入数据库代理Myhub,支持读写分离引入注册中心,应用侧去除DNS依赖Myhub连MySQL不强依赖DNSDNS
2、异步解析,减少阻塞时间同城双活改进点改进点应用、数据库双机房部署MHA探测跨机房二次确认Slave HA,宕机节点自动隔离Slave权重动态调整跨云多活-背景单云入口层异常更强大的灰度和容量管理能力主机房资源受限单供应商议价能力差地域级故障跨云多活-前期探索没有推广的原因没有推广的原因链路管理复杂依赖业务侧单元化拆分数据一致性问题额外资源消耗业务场景接受跨区写基于DRC实现MySQL双向复制跨云多活-落地跨云多活-目前高可用相关组件主区主区应用、数据库分布在两机房ORC采用raft模式部署,三机房三节点ORC backend db使用本地单节点MySQLheartbeat全量集群部署binlo
3、g server全量集群部署,与全备拉同一个slavebinlog server和backup只在上海部署异地异地应用、数据库单机房部署ORC采用raft模式部署,单机房三节点ORC backend db使用本地单节点MySQL整体切换策略同城自动切换异地人工决策,一键切换主区恢复后,低峰切回本区内切换策略Master HAMaster HA自动转移ORC控制,30S内完成转移不强依赖DNS,物理IP兜底Slave HASlave HA自动转移Myhub控制,20s左右完成转移主区slave延迟自动隔离异地slave延迟默认不隔离(可配置)并发度控制并发度控制同一时间只允许3个集群切主5分钟内
4、最多允许10个集群切主同一集群1小时内只允许切主一次同城自动切换Slave隔离策略兜底保护兜底保护增加配置本区最少可用节点数,防止雪崩非主区默认设置1,尽可能避免跨区读主区默认不开启可用节点优先级异地切换异地切换异地切换异地机房容量容量管理容量管理跨云集群整体容量评估异地机房平时接受30%业务流量业务切流演练,异地接受50%流量切流限流切流限流网关、SDK、myhub、DNS都具备切流能力myhub层限流(USER、DB、SQL)离线流量掐断预案演练演练项演练周期主库自动切换双月Myhub切流双月Myhub屏蔽从节点双月Myhub SQL限流双月全备自动恢复每天binlog恢复双月核心集群容量压测双月业务流量跨区切流(SRE负责)双周主机房故障演练(WIP)实践总结成果成果完成核心场景的MySQL跨云落地,有效支撑上层业务在多云多地之间的弹性调度核心数据库摆脱单云单机房限制,支持跨云跨地区容灾ORC已全量替换MHA,HA去除单点风险,做到自身高可用更准确的探测,更短的RTO,master故障转移时间由原先的50s缩短到30s内Myhub全量接入配置中心,更专业的配置管理不足不足跨云集群应尽量被跨云服务独占,避免资源浪费专线带宽管理,跨区调用应尽早治理THANK YOU!
1、下载报告失败解决办法 2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。 3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。 4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。
电信网络中的图学习性能优化-曾立.pdf
GraphGPT_汤嘉斌_hku.pdf
朱雀图计算平台与大模型-0908.pdf
240127腾讯游戏大规模图学习研究与落地 .pdf
图机器学习在京东内容推荐中的应用-京东-姚翔宇.pdf
图在金融反欺诈中的应用.pdf
张梦玫datafun分享_final_zmm.pdf
大语言模型对汽车行业的影响和实践探索_分享版.pdf
三七互娱AI客服分享-datafun.pdf
任旭滨LLMs Enhanced Rec.pdf
动态推荐场景下的图学习.pdf
旅行经营决策中的时序预测应用.pdf
用户画像的分类及应用介绍.pdf
AnalyticDB PostgreSQL实时物化视图在飔合科技实时数仓的实践.pdf
【微软】A Unified Database for Scalar-Vector Data.pdf
NIO-段全盛-应用大模型打造企业级信息引擎.pdf
三个皮匠报告专业的行业报告下载站,每日更新,欢迎大家关注!
copyright@2008-2013 长沙景略智创信息技术有限公司版权所有 网站备案/许可证号:湘B2-20190120
专属顾问
机构入驻、侵权投诉、商务合作
三个皮匠报告官方公众号
验证即登录,未注册将自动创建三个皮匠报告账号
使用 微信 扫一扫登陆