1、PolarDB MySQL引擎重磅功能及产品能力盛大发布陈宗志阿里云数据库高级技术专家Contents目录01PolarDB MySQL引擎全新特性重磅发布02PolarDB MySQL引擎经典案例解读云原生关系型数据库 PolarDB MySQL引擎全新特性重磅发布012021 VLDB PolarDB架构创新论文Towards Cost-Effective and Elastic Cloud Database Deployment via Memory Disaggregation2021 VLDB PolarDB最新论文Revisiting the Design of LSM-tree

2、Based OLTP Storage Engine with Persistent Memory2021 SIGMOD PolarDB Serverless/LogStore2020 SIGMOD Timon:A Timestamped Event Database for Efficient Telemetry Data Processing and Analytics2020 VLDB Leaper:A Learned Prefetcher for Cache Invalidation in LSM-tree based Storage Engines2020 VLDB LB+Trees:

3、optimizing persistent index performance on 3DXPoint memory2020 FAST POLARDB Meets Computational Storage:Efficiently Support Analytical Workloads in Cloud-Native Relational Database2020 FASTHotRing:A Hotspot-Aware In-Memory Key-Value Store2020 FAST FPGA-Accelerated Compactions for LSM-based Key-Value

4、 Store2019 SIGMOD X-Engine:An Optimized Storage Engine for Large-scale E-commerce Transaction Processing2019 VLDB Cloud-Native Database Systems at Alibaba:Opportunities and Challenges2019 VLDB S3:A Scalable In-memory Skip-List Index for Key-Value Store 2019 VLDB iBTune:Individualized Buffer Tuning f

5、or Largescale Cloud Databases2018 SIGMOD TcpRT:Instrument and Diagnostic Analysis System for Service Quality of Cloud Databases at Massive Scale in Real-time2018 VLDB PolarFS:An Ultra-low Latency and Failure Resilient Distributed File System for Shared Storage Cloud Database作为标准第一起草人参与由中国信息通信研究院牵头制定

6、的云原生数据库标准（编号：H2019009493）VLDBVLDB：全称VERY LARGE DATA BASE，数据库领域著名国际会议SIGMODSIGMOD：数据库领域具有最高学术地位的国际性学术会议之一，由美国计算机协会（ACM）数据管理专业委员会发起FASTFAST：全称USENIX Conference on File and Storage Technologies，存储行业顶级国际会议2018年度 最佳创新产品奖2019年中国数据库年度最佳创新产品领先科技成果2019世 界 互 联 网 大 会2020中国电子学会科技进步一等奖阿里云PolarDB已建立广泛行业影响力部署简单传统开

7、源及商业数据库PolarDB是阿里巴巴自主研发的下一代云原生关系型数据库，100%兼容MySQL/PostgreSQL数据库，高度兼容Oracle语法。经过阿里巴巴双十一活动的最佳实践，让用户既享受到开源的灵活性与价格的优惠，又享受到商业数据库的高性能和安全性。共享状态NetworkDBDBDB兼容性,scale up分布式DBDBDBScale UpScale OutDBDBDBDBDBDBNetwork单节点NetworkDBMySQLPostgreSQLOracle语法兼容版Shared Everything计算与存储分离架构的云原生数据库PolarDBShared Nothing+Sh

8、ared Everything云原生分布式数据库MySQLPolarDB-X本地磁盘Shared StorageShared StorageShared StorageShared Storage阿里云 PolarDB 产品家族主节点智能代理PolarProxy数据库计算节点自定义读写分离自动负载均衡HA切换安全保护PolarStoreREAD/WRITEREADApplication只读实例1RDMA数据存储节点abc数据存储节点abc数据存储节点abc只读实例2只读实例3ParallelRaft云原生关系型数据库PolarDB MySQL引擎的优势大容量高弹性最大存储容量100T，最高超1

9、000核CPU可扩展到16个计算节点5分钟完成添加只读实例和升降级配置；支持临时升级，弹多久，付多久的钱，高性价比应对业务高峰高可靠高可用基于分布式共享存储，数据3副本，多可用区部署主节点故障后30秒内切换到任一只读节点；秒级备份，可按时间点快速恢复数据；全球数据库，实现高效异地容灾，全方位、多维度确保 RPO=0高性能低时延分布式共享存储确保主从数据库毫秒级延迟、并提供超高I/O吞吐能力，通过多个计算节点自动读写分离，高并发下性能是自建开源数据库的5-6倍；内置原生并行查询Parallel Query，充分利用多核CPU，10倍提升大表并行查询性能安全可控黑白名单设置访问权限；SSL加密确保

10、数据传输链路安全；TDE对数据存储过程进行加密和解密；数据库、表或列可设置动态脱敏查询；一键SQL洞察，对SQL进行健康诊断，识别高危SQL，有效防范可能风险PolarDBPolarFSWALWALWALWAL数据库代理企业版PolarDBRWDBADBBDBCShared MetaPolarDBRWDBDDBEDBFRWDBAMeta CacheDBGDBHDBIMeta CachePolarDBDBJDBKDBLMeta Cache从一写多读架构全新升级为多主架构（开放申请）基础功能支持不同数据库在不同计算节点并发写入最多支持32个节点同时写入支持数据库跨节点动态调度，秒级切换计算节点故障

11、秒级完成切换应用场景SaaS应用：满足高并发性能需求，实现租户间负载均衡游戏：更好的性能和扩展能力，支持世界服架构RWDBBDBCDBDDBEDBFDBGDBHDBIDBJDBKDBL数据库代理企业版数据库计算节点EndpointFor OLTPREAD/WRITEREAD应用只读实例3（AP节点）EndpointFor OLAP数据库存储节点RDMA数据存储节点abcParallelRaftColumn-StoreColumn Store Memory PoolSQL ParserCost EvaluationRow-StoreBuffer Pool只读实例3（AP节点）只读实例1（TP节点

12、）主节点（TP节点）数据存储节点abc数据存储节点abc从OLTP架构全新升级为HTAP架构（开放申请）PolarDB Server列索引（In-Memory Column Index）100%MySQL兼容TP性能与原生PolarDB一致，AP性能与专用AP系统同一量级灵活部署：OLAP on RO（now，实时分析）、OLAP on OSS（Future，离线分析）PolarStore电商等高性能在线业务高性能实例普通性能实例历史账单等普通业务混合实例AP节点实时推荐等在线分析业务混合实例AP节点报表等离线分析业务推出高性价比的标准存储类型，满足更多类型的业务需求（正式发布）Oltp_re

13、ad_onlyOltp_read_writeOltp_write_only84.82%80.48%68.03%高性能储存标准储存价格：3.5元/GB/月高性能介质（SSD）高性能优化高性能储存价格：2.5元/GB/月高性能介质或混合介质分级存储或透明压缩标准存储（NEW）价格：待定普通介质（OSS）分析场景优化分析型存储（Future）Chunk2Chunk1Chunk0RedoSnapshot 1Snapshot 2Snapshot 3T0T3闪回到T1时刻恢复到T2时刻示例应用RedoT1T2粒度：实例级回滚时间范围：3天以内时间精度：1秒恢复耗时：通常3分钟以内，与数据量无关HeadUn

14、do log xC=3HeadC=2HeadC=1Current Read ViewRead View 2Read View 1Read View 2Read View 3Read View 4历史视图表Undo log yUndo log zSelect C C=3Select CAs ofC=2Replace Read View粒度：记录级闪回查询时间范围：3天以内时间精度：1秒查询耗时：通常秒级推出闪回Flashback功能，快速恢复数据（即将开放申请）闪回（Flashback）闪回查询（Flashback Query）推出秒级弹性扩核能力，平滑应对业务高峰（开放申请）基础功能秒级业务状

15、态监控秒级弹性扩vCPU智能自动弹性扩展SQLSQL业务高峰期业务平衡期应用场景电商营销活动（秒杀、特价、双十一）SaaS租户突发业务激增游戏运营活动（新开图、特价）、晚间业务高峰推出集群增强版，提供金融级可靠保障（开放申请）基础功能三可用区部署Red log 实时同步跨可用区高可用，确保数据零丢失，RPO为0应用场景金融级高可靠，比如银行、证券、保险、大企业核心业务等AZ1 PrimaryDataRedo LogPolarStorePaxos+Redo LogAZ2 StandbyPolarStoreAZ3 StandbyDataRedo LogPolarStorePaxos+Redo Lo

16、gPaxos+Redo LogRedo Log主从切换加速，进一步提升业务连续性（开放申请）ReadReplicaDB ServerBPDB ServerChunkServerAbcChunkServeraBcChunkServerabCRWPolarFS on PolarStorePolarProxyHRO基础功能提供热备节点，BP实时数据同步通过voting disk进行主动故障切换主从切换不可用时长缩短至510秒升降配、升级不可用时长缩短至510秒（Future）应用场景主动主从切换节点故障引发的主从切换GDN5.6全新发布，帮助企业进一步提升异地容灾能力（正式发布）ROBPloglog

17、data主节点RWBPlog同步节点BPloglogdataROBPlogROBPloglogdata同步节点BPlog张北美国硅谷（美西）香港X-PaxosData sync protocol全球部署Global Deployment数据跨地域同步，提供全球跨地域的容灾能力。RPO=0 SLA为99.99%就近读加速Accelerate by Reading the Nearest Node读操作就近读取数据，适合不同地域读多写少的场景多通道物理复制Multi-Channel Physical Replication提供数据跨地域的高速同步，大压力场景下全球同步延迟确保在2秒以内多点跨地域写

18、Write to Multi Zones and Regions提供多点跨地域写功能，提供业务的多地部署能力02PolarDB MySQL引擎经典案例解读易仓科技：单实例支持百万级表，快速弹性小卖家(300以上)中等卖家（50150)大卖家（10以下）实例1实例2实例3600个卖家 600个卖家600个卖家 DTS(OPEN API)PolarDB MySQL仓储物流云BI运营 刊登云原生关系型数据库PolarDB助力易仓轻松应对SaaS业务洪峰DAS（SQL审计、限流）Kafka大数据平台单实例支持百万级表单实例放更多租户，降低成本单实列表卖家数量90%300万小卖家小卖家小卖家小卖家小卖家

19、大促快速弹性分钟级弹性满足大促场景快速扩缩需求并行DDLDDL耗时降低到1/13语句限流规避大批量DDL和异常SQL堵塞实例小卖家中卖家中卖家中卖家大卖家数据提供友邦人寿：引入PolarDB支撑保险业务系统加速上云业务描述健康承保核保契约线下数仓/HadoopDB2/400LogSLSMQDIDTSKafkaStream ComputeMapreduceSpark数据加工PolarDBAnalyticDB/HOLOMaxcomputeOSS数据服务RedisPAIMySQLBL营销引擎营销平台Api GatewaySpark友邦保险客户画像：线下核心交易系统运行在IBM DB2 AS400中，

20、交易数据计划通过DTS实时同步到PolarDB MySQL引擎；此外，线下Oracle数据库经过ADAM评估，与PolarDB O引擎兼容度高达99%，计划通过DTS直接迁移至云上PolarDB-O。使用场景：在全面上云前的过渡期内，线下发生的所有保单交易仍然进入DB2 AS400，通过DTS实时同步到PolarDB MySQL引擎，由PolarDB MySQL引擎全面支撑来自Web/App的高并发保单查询。云原生的PolarDB MySQL引擎具备良好的性能和弹性，可以更好的应对突发业务负载。“保险上云”头部标杆。计划用三年时间，实现全面上云，其中2020年计划将35%的核心业务系统迁移上云。THANKS