1、金融金融级级分布式数据分布式数据库库技技术现术现状和状和趋势趋势黄黄东东旭旭|PingCAP关于我关于我 黄东旭,CTO PingCAP MSRA/网易/豌豆实验室/PingCAP 分布式系统工程师/架构师/开源爱好者 Codis/TiDB/TiKV/TiSpark Email: Wechat:huangdongxu当我当我们谈论们谈论分布式数据分布式数据库库 是在是在谈论谈论什么?什么?分布式分布式 OLTP 数据数据库库技技术术路路线线 Sharding(分片技术,分库分表)Shared-everything(共享存储)Shared-disk(共享磁盘)Shared-log(共享日志)Sh
2、ared-nothing(纯分布式架构)Sharding-分片分片优势优势:技术简单 对于简单查询的读写性能尚可劣劣势势:对业务端的侵入性很大 可运维性差 弹性不足 适用场景受限Sharding-分片分片在传统单机数据库上进行数据分片,通过业务层或者一个中间路由层(Proxy)将不同的请求发送给不同的数据库实例。代表的方案:业务层拆分,分库分表 基于 Proxy 的各类数据库中间件 Shared Disk-共享磁共享磁盘盘直接将 MySQL 实例部署在分布式文件系统之上 MySQL on Ceph MySQL on ClusterFS缺陷:写入瓶颈并没有解决,仍然是的单机写入 依靠文件系统的多
3、副本复制及高可用 写放大问题 缓存同步Shared Log-基于日志复制的共享存基于日志复制的共享存储储日志即存储The log is the database日志落地,其余的皆缓存代表方案:Amazon AuroraMySQL Group Replication(*)缺陷:缺陷:仍然有单点写入的问题Scale 仍有上限复杂SQL计算很难利用多机的计算资源优势优势:相比共享磁盘的方案,极大减小了读写放大对公有云的使用场景友好兼容性Shared Nothing-纯纯分布式架构数据分布式架构数据库库无单点/无中心/无限平滑扩展自动分片,无关联的请求没有公共的依赖路径代表系统:Google Span
4、ner/F1TiDB优势优势:真正能做到无限的水平扩展无单点,整体可用性强业务侵入性小NewSQL可以利用分布式计算技术加速复杂查询劣劣势势:实现较为复杂在某些场景下需要重新思考业务设计金融金融级级数据数据库发库发展展趋势趋势(1/2)Shared nothing 成为主流小机下移 重新定义可用性和可运维性故障无法避免自恢复能力是关键 不同场景百花齐放,互金、电商、社交、在线客服、风控等等业务场景不同,数据结构和适用的系统也不同金融金融级级数据数据库发库发展展趋势趋势(2/2)云化的趋势不可逆私有云?公有云?HTAP(Hybrid Transactional/Analytical Processing)混合交易分析型数据库将会大放异彩HTAP 是什么?解决了什么问题?轻前台-大中台微服务化是架构云化带来的必然结果 测试测试和和评测标评测标准需要革新,技准需要革新,技术术架构架构标标准化工作刻不容准化工作刻不容缓缓金融分布式数据金融分布式数据库库白皮白皮书书 分布式事务数据库定义分布式事务数据库发展历程常见的分布式数据库技术架构及与传统架构的对比金融行业事务型数据库业务需求分析以及对数据库技术上的具体需求已有业务迁移和实施建议
1、下载报告失败解决办法 2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。 3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。 4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。
2021年金融级分布式数据库白皮书(35页).pdf
2019年云时代企业级分布式数据库的技术挑战.pdf
2017年金融场景分布式数据库强一致保证.pdf
2018年金融分布式事务数据库白皮书与标准解读.pdf
Greenplum Database 的分布式查询优化-内核 + 分布式数据库(29页).pdf
从数据库历史看分布式数据库的架构设计趋势_赵伟.pdf
TDSQL PostgreSQL版企业级分布式数据库技术创新实践(21页).pdf
2019年分布式数据库下5000亿+数据秒级响应的探索与实践.pdf
京东数科分布式事务JDTX与数据库中间件:Apache ShardingSphere的集成之道-分布式数据库专场(25页).pdf
三个皮匠报告专业的行业报告下载站,每日更新,欢迎大家关注!
copyright@2008-2013 长沙景略智创信息技术有限公司版权所有 网站备案/许可证号:湘B2-20190120
专属顾问
机构入驻、侵权投诉、商务合作
三个皮匠报告官方公众号
验证即登录,未注册将自动创建三个皮匠报告账号
使用 微信 扫一扫登陆