1、破局音视频终端困境快速实现多种音视频应用腾讯云视立方腾讯云音视频产品架构师 涂签杭音视频终端应用开发困境视立方SDK是什么？视立方SDK应用场景视立方的技术优化实践目录音视频终端应用开发困境集成SDK数目多为实现应用不同音视频通信功能，开发者需要多次即成不同功能的SDK01接入复杂导致联调难度大不同功能模块API调用规范不统一，导致联调工作量大且Bug频出License管理混乱多个SDK的License和到期时间不同，版本管理和续期难管理03音视频重点应用开发困境针对上述音视频终端应用开发经遇到的困境腾讯云推出了视立方SDK，以帮助开发者解决上述问题02视立方是什么？腾讯云“视立方”:破局音视

2、频终端困境1次接入1个License1个SDK 腾讯云视立方 SDK 为音视频终端SDK产品合集，集成了直播推流、视频播放、实时音视频、即时通信等音视频核心能力，为用户提供一体化SDK，支持移动端、PC 端、Web 端、小程序端等多终端接入。根据时下火热的各类音视频场景，提供SDK快速集成方案，用户还可根据业务需求定制化集成 SDK。将常见音视频通信功能全部集成于一个SDK中，仅需1个SDK即可实现所有功能。统一API调用规则，降低联调工作量。仅需1次集成联调。1个License管理多个功能模块，解决版本迭代License管理混乱的问题。积木般根据需求自由组合子产品版SDK：针对某一场景提供单

3、一功能的SDK，优点是包体较小，适用于业务垂直或对包体大小敏感的开发者。全功能版SDK：功能全面，把所有子产品SDK功能全部集成至1个 SDK。适用于业务较为复杂或产品可能有功能拓展的用户。腾讯云视立方SDK酷似多个功能模块SDK搭积木组成，用户可以根据使用场景和对SDK的要求，选择腾讯云视立方SDK 或各个功能模块子产品 SDK。腾讯云“视立方”:破局音视频终端困境RT-ONE:一站式、高质量满足基础网络协同需求2800+全球加速节点200Tbps+带宽储备27区域RT-ONE音视频通信基础网络=CDN-流媒体分发网络应对海量大并发直播、点播内容的分发IM-即时通信网络负责即时通信消息和业务

4、信令TRTC-实时音视频通信网络主要承载音视频实时通信业务+泰国225561在线新上线伙伴IDC11东京首尔北京广州深圳香港上海成都新加坡印度悉尼莫斯科阿姆斯特丹伦敦多伦多圣保罗圣何塞达拉斯12硅谷1112重庆2111法兰克福2111阿什本71可用区RT-ONE+“视立方”：为客户提供云端一体音视频PaaS能力稳三网合一全最全终端SDK快一天接入超过20年技术沉淀，音视频编解码技术全球领导者唯一同时具备并融合CDN分发网络、IM即时通信网络、TRTC实时通信网络的公有云，产品方案市场排名第一90%音视频客户覆盖，众多海量技术服务经验及体系覆盖全场景的视频采集/推流、移动直

5、播、互动直播、短视频编辑、视频通话、即时通信、美颜动效等17套SDKAll in one 视立方SDK按需勾选，一次接入可调用所需SDK面向垂直场景，提供超过10套aPaaS低码方案，开放源码及调用示例，700+API、最快一天接入为开发者提供13+音视频开源项目，各终端 SDK Github 资源、FFmpeg、SRT alliance等开源资源端采集拍摄/推流实时音视频互动即时通信美颜特效音视频通信短视频剪辑直播/点播播放云TRTC-实时音视频通信网络IM-即时通信网络CDN-流媒体分发网络RT-CUBE 腾讯云视立方音视频终端RT-ONE腾讯云音视频通信网络RT-ONE+“视立方”产品架

6、构图小程序底层 SDK微信小程序手机 QQ 小程序企业微信小程序Web SDK桌面版 Chrome桌面版 Safari终端 SDKiOSAndroidElectronWindowsmacOS多人音视频通话、低延时互动直播实时音视频 TRTC录制文件存储、回放云点播 VOD快直播、标准直播协议观看云直播 CSSWebRTC协同使用私有协议Linux旁路直播腾讯特效引擎XMagic美颜美妆、贴纸动效、人像分割即时通信 IM消息收发、用户资料管理、群组管理正版曲库 AME线上背景音乐专用曲库资源互动白板互动白板涂鸦、课件转码共享语音/视频内容审核天御语音识别/转文字语音识别ASR转SIP协议运营商电

7、话PSTN协同使用云端录制视频处理直播拉流HLS、FLV、WebRTC观众点播回放媒资管理、剪辑、导播转推云创多媒体视频处理产品接入：根据场景选择SDK，提供多种集成方式12345选择场景推荐SDK下载SDK购买License开通服务控制台解锁License选择集成方式上线您的音视频应用！一天快速搭建买包赠送/独立购买License含UI集成方式不含UI集成方式创建实时音视频项目一套LicenseURL&LicenseKey控制台管理多个APP视立方SDK（全功能版SDK）播放器SDK腾讯特效SDK直播SDK音视频通话SDK短视频SDK直播服务类场景短视频类场景音视频通话类场景美颜特效类场景视

8、频播放类场景多场景组合视立方SDK的应用场景产品功能全面且强大采集拍摄/直播推流短视频剪辑AI美颜特效音视频连麦互动即时通信IM直播/点播播放 支持多种屏比拍摄、变速控制、分段录制；录制过程中支持声音特效、背景音乐设置等功能；提供强大的 RTMP、RTC 推流能力；配合云直播（CSS）全球布局的2000+节点，提供稳定、快速的高质量推流服务。提供丰富的动效贴纸素材和强大的美颜美妆能力，同时基于优图精准的 AI 能力和天天 P 图丰富的实时特效处理，为各类视频处理场景提供多元化高自由度的处理能力。支持基于RTC协议的实时音视频连麦，实现主播与观众之间多人的视频连麦直播互动。实时互动超强体验，全球

9、端到端延时 300ms 50%丢包率可视频观看，70%丢包率可语音连麦 为终端观看提供强大的直播、点播播放能力，支持片头暂停和片尾贴片、LOGO 自定义和密码设置等功能。具备帧时间线、按帧预览、截取游标、速度设置等剪辑能力，并且支持时间特效、滤镜特效、滤镜风格、音乐混音、动态贴纸、静态贴纸、气泡字幕等功能。基于QQ底层IM能力开发；提供全球接入、单聊、群聊、消息推送、资料关系链托管、帐号鉴权等全方位解决方案，并提供完备的 App 接入、后台管理接口。TRTC：快速实现全球跨平台、超高品质的实时音视频互动场景超高品质高品质：腾讯会议同款3A引擎高抗性：丢包率70%正常语音通话低延时：全球平均端到

10、端延时 支持第三方IM产品简单、低成本平滑迁移基础功能视立方的技术优化实践全新视频编码优化，提升弱网抗性标准的 GoP 帧参考关系：丢帧即卡顿采集编码解码播放loss 0IPPPPP P P P PPPIPPPPP P P P PPP采集编码解码播放loss 0IPPPPP P P P PPPIPPPPP P P P PPPRPS参考帧集ROI感兴趣区域编码时域SVC分层编码全新音频编码优化，提升弱网抗性cPLC：自研的基于上下文的丢包补偿技术，通过修改音频codec，记录音频帧的状态信息，当遇到音频帧丢失时，通过 PLC 进行恢复重建，并且做好音频的平滑处理。cFEC：自研的基于上下文分析的

11、前向纠错，针对语音信号进行建模，引入信源侧抗性，提升丢包场景的语音质量，比OPUS原生的带内FEC恢复效果明显更佳。原始音频丢包语音cPLC补偿云端流控：先进的云端决策系统采集模块前处理模块编码模块网络模块网络模块缓冲队列解码模块渲染播放lossdelayjitterlow bandwidth20%丢包时间丢包率(%)0%100%突发超高丢包时间丢包率(%)100%0%云端 QoS 流控系统海外英语教学语音聊天室1v10 小班课视频互动直播低端机、高延时双声道、立体声低延时、低课损强互动、高画质RTTStrategyAudioStrategyMultiStrategyHDStrategy更多应用场景 XXXStrategy网络状态-丢包率-延时-抖动-带宽评估-设备信息-性能指标音质评分画质评分流畅表现CONFIDENTIAL PROPERTIES云端智能流控系统，动态调整客户端 QoS策略，即使身处一个房间，也能做到每个人独立调控，保证每个用户的音视频体验谢谢观看THANKS