《ApsaraMQ Serverless演进之路助力客户降本.pdf》由会员分享,可在线阅读,更多相关《ApsaraMQ Serverless演进之路助力客户降本.pdf(15页珍藏版)》请在三个皮匠报告上搜索。
1、ApsaraMQ Serverless演进之路,助力客户降本家泽阿里云产品专家ApsaraMQ 与时俱进,砥砺前行诞生即开源,内外一体,集团双 11 万亿级洪峰考验RocketMQ诞生20023扩大消息队列阵型,服务云上企业客户商业化发展事件、消息、流一体的融合消息处理平台RocketMQ 5.0发布ApsaraMQ 系列产品架构升级,全新的用户体验,更高的弹性,更低的价格,帮助客户降本全新品牌升级 ApsaraMQ通用场景覆盖微服务解耦大数据/ETL物/车联网 IoTSaaS 集成即时通信/弹幕事件分发日志/ELK消息队列产品矩阵ApsaraMQ for RocketM
2、Q互联网等新兴业务领域首选数据通道ApsaraMQ for RabbitMQ对标开源,业务消息选型补充ApsaraMQ for MNS对标 AWS SQS/SNS,轻量版 RocketMQApsaraMQ for Kafka大数据领域/业务日志首选数据通道ApsaraMQ for MQTT移动互联网&物联网通信网关Serverless 弹性多级存储百万队列高吞吐&低延迟核心竞争力海量连接存算分离SLA 最高 4 个 9异地多活/灾备游戏玩家行为分析游戏信令互娱应用解耦直播互动在线教育直播/白板信令 即时通信/内容推送物联网IoT车联网工业物联网交易/电商电商交易个性化推荐/运营数据面向应用、数
3、据集成的可靠消息通道云原生的本质是充分释放云计算的红利,实现客户业务的降本增效。而 Serverless 已成为一个技术趋势、一个理念、一个云原生发展的新阶段。让客户只需聚焦在自身业务逻辑,对资源(Server)无感(Less)。全面托管开箱即用从半托管到全托管做的更少而收获更多企业不需要繁琐的运维易于集成和使用自适应弹性按用量付费全链路自动伸缩从容应对流量波动不为闲置资源付费成本更优云产品从云原生走向Serverless低成本架构升级,低成本,低价格优化计费方式稳定可靠服务稳定性架构升级业务稳定性提升易使用MQ User Plane自助、无损迁移工具生态集成云上生态领域生态面向Serverl
4、ess设计的云消息服务全面Serverless化,按用量付费,秒级弹性,高性价比的消息产品 存算分离,秒级弹性 解决数据倾斜难题 容灾能力提升Serverless已Serverless化商品:MNSApsaraMQ 核心产品升级RocketMQ弹性能力万QPS50%33%实例成本降低存储成本降低Kafka 3.0弹性能力GB20%33%对比自建成本降低存储成本降低RabbitMQ弹性能力万QPS75%33%实例成本降低存储成本降低MQTT弹性能力万QPS50%实例成本降低阿里云商业版架构存算分离是消息服务Serverless化的基础读写消息内部复制消息内部复制消息Broker 1读写消息本地磁
5、盘分布式三副本存储计算节点无状态秒级扩缩存储弹性按需使用单节点故障业务无损并可快速恢复开源自建架构Broker 2本地磁盘Broker 3本地磁盘Broker 1Broker 2Broker 3 阿里云基础设施计算能力秒级弹性,降低闲置成本 云的弹性优势充分利用云计算,云存储,云网络的规模化、快速弹性的优势,提高消息的弹性效率。秒级自适应弹性多维度、多指标监控,指导服务弹性,兜底突发流量。按需付费减少闲置成本,成本降低50%80%。弹性区间按量付费基准规格预留付费监控分析弹性调度消息实例ECS计算MQ Cluster 1PodPodPodInstance AInstance BInstance
6、 CInstance N业务流量指标资源池余量指标服务可用指标集群水位指标阿里云容器服务垂直扩缩容水平扩缩容实例迁移容灾切换ApsaraMQMQ Cluster 2PodPodPodESSD/OSS/盘古存储按量使用NLB/PrivateLink/CEN网络平滑支撑多级存储实现按需存储,大容量,低成本Hot DataManagerCold DataManagerDay 1BrokerMQ ServerCostly SSDMsg999 Msg998Msg 0Msg 1Msg 2.海量数据存储海量数据,无限存储空间超过 30 天自定义保存时长自适应弹性消息存储 Serverless 化,按实际存储
7、使用量付费多级存储,对比云盘自建成本降低 33%更高性能计算层代理冷热数据读写分离,收发相互隔离冷数据碎片规整,冷读堆积场景性能更稳定成本优化Topic 级 TTL 设置,存储力度更加精细,灵活Unlimited Low-cost StorageTopic 1Msg 10Msg 11Msg 12Topic 2Msg 100Msg 101Msg 102Topic 1Msg 110Msg 111Msg 112Topic 2Day 2Day NMsg 700Msg 701Msg 702Topic 1Msg 710Msg 711Msg 712Topic 2可靠的SLA 保障是服务稳定的基础技术架构及部
8、署架构稳定性设计系统运行稳定性保障Broker本地存储Queue云原生容器服务(Kubernetes)Queue高效云盘ECSVPC网络计算层存储层TCP SDK秒级 RTO:存算分离,跨可用区容灾架构,保障单节点,单可用区故障消息服务的稳定性容器化部署:充分利用容器的自愈能力,宕机自动拉起,水位伸缩保障服务稳定运行;服务可用性:最高可达 99.99%;数据的可靠性:最高可达 99.9999999%;SLO监控指标巡检运行时告警应急工具稳定性理论与实践相结合,构建消息SRE平台,全方位监管系统运行时。自检与运行时巡检结合:基于原生 SDK 接口实现黑盒探测逻辑,最大程度模拟用户行为。核心收发功
9、能全覆盖,管控类功能基本覆盖。探测实时性高:全天 24 小时运行覆盖,异常状态 1 分钟探测,实时告警到钉钉、邮箱和电话渠道。50+检测项ProxyProxy可用区BrokerQueueQueue多级存储Broker本地存储QueueQueueProxyProxy可用区BrokerQueueQueue多级存储对象存储SRE 平台MQ User Plane 全面升级性能风险数据链路异常安全风险RocketMQKafkaRabbitMQMQTTMNS线上生产业务实时巡检自助 TroubleShooting统一消息产品系列用户体验增强消息上下游全链路稳定性提升数据处理和集成能力专家经验模型根因分析使
10、用规范业务研发和运维负责人稳定性评估&接入产品能力评估(一键体验)数据集成成本评估(价格计算器)平滑迁移(迁移上云工具)架构师数据过滤、加工(EB、FC、ODPS)数据分析BI数据冷备(OSS、ES)数据路由(跨实例/地域/消息产品)User Plane产品系列Metrics 指标可观测基础数据Tracing 消息轨迹Events 关键事件Logging 日志生产者消费者开源自建RocketMQ无损云服务统一流量调度,迁移过程业务不停服。安全可控Topic 粒度迁移,可分批次、可灰度、可回滚,有效降低大面积变更的风险。开源自建RocketMQ商业RocketMQ迁移工具元数据、参数、权限消息生
11、产、消费可视化平滑迁移上云,风险小,成本低迁移前迁移中生产者消费者开源自建RocketMQ商业RocketMQ迁移工具消息生产、消费迁移中生产者消费者生产者消费者开源自建RocketMQ迁移前迁移任务可视化,白屏化,节省迁移人力投入成本,迁移更丝滑。可视化丰富的消息生态助力企业快速构建应用开放集成:提供开放且丰富开放的跨云、跨地域、跨账户连接能力,促进云产品、应用程序,SaaS服务相互集成。数据处理:支持灵活可编排,可组装,可自定义编码的消息数据处理能力。稳定,高可用:支持 Serverless 动态弹性扩容,无需关心底层资源。消息生态(RocketMQ、Kafka、RabbitMQ、MNS、
12、MQTT)数据库生态大数据生态日志分析更多消息生态(RocketMQ、Kafka、RabbitMQ、MNS、MQTT)数据库生态大数据生态存储生态更多事件总线 EventBridge函数计算 FC云工作流 CloudFlow多端投递消息连接器(Connector)数据处理(ETL)安全可靠动态弹性跨域/跨网/跨云数据过滤Schema数据转换自定义编排数据源数据目标集成能力集成范式阿里云提供全球 400 万客户的机会&全球 70%500 强企业在使用 Apache Kafka,其中 36%选择 ConfluentConfluent 将会作为 ApsaraMQ for Kafka的一个规格在阿里云的国内站&国际站亚太站点全面发布阿里云是 Confluent 中国大陆地区唯一的合作商阿里云&Confluent 联合技术支持Confluent 背靠背的技术合作伙伴ApsaraMQ for Kafka 推出独立 Confluent 规格,全面支持 Confluent 能力为客户提供阿里云+Confluent 全面的消息解决方案。THANKS