《37手游量子智能广告系统基于云原生 OLAP 的应用实践.pdf》由会员分享,可在线阅读,更多相关《37手游量子智能广告系统基于云原生 OLAP 的应用实践.pdf(23页珍藏版)》请在三个皮匠报告上搜索。
1、37手游量子智能广告系统基于云原生Olap的应用实践演讲人:徐玉立 37互娱 数据架构师目录业务背景量子系统建设实践37手游OLAP演进未来展望Contents01 37手游的业务背景公司介绍 全球TOP20上市游戏企业,2022年营业收入164.06亿元,境内业务收入104.12亿元,境外业务收入59.94亿元(同比增长25.47%)。公司介绍 迄今为止,37手游累计运营逾2000款手机游戏,以近10%的市场占有率占据国内手游TOP3位置,成功独立发行永恒纪元精灵盛典:黎明斗罗大陆:武魂觉醒斗罗大陆:魂师对决云上城之歌谜题大陆大天使之剑H5等优秀作品。云上城之歌:2022年海外发行商在韩国市
2、场收入最高的手游2022年中国手游日本市场手游收入增长榜第3名业务背景 数据化通过数据驱动决策,实现流量经营的精细化工具化重视工具的应用和创新,通过工具的智能化和自动化,提高流量经营效率和回报率智能化重视人工智能的应用和创新,通过人工智能的技术和算法,实现流量经营的智能化和个性化流量经营量子系统介绍 量子系统核心模块数据管理计算投放效果,对广告计划进行数据分析资源管理对素材、人群包、落地页等资源进行管理,方便后续进行分析和重复利用投放管理通过自动化投放以及智能投放工具,代替人工进行自动化的投放量子系统-核心功能 数据管理定制化报表整合媒体数据与内部转化数据,搭建自由素材创意库,辅助创意团队进行
3、创意升级,提升转化率人群包推送转化ID推送免联调实现自动打APK包、自动打监控链接、自动配置参数和活动组,自动创建广告计划等功能投放预警自动规则批量操作计划快速提升广告投放速度,并实现投放业务“7x24小时”的批量化与自动化账户管理人效管理自动化对账,全流程无需人工参与,实现财务数据自动化对账,成本与效果的核算。自动化充值,只需审批充值,即可自动到账创意数据分析效率提升工具批量化与自动化自动化对账量子系统-智能投放 海量数据计划海量数据计划机器学习产生机器学习产生模型模型使用哪些使用哪些素材素材使用什么样的人群使用什么样的人群包包使用哪些账号使用哪些账号投放投放竞价方式竞价方式如何如何何时创建
4、何时创建计划计划什么条件下关停什么条件下关停计划计划何时调整何时调整计划计划智能化创建优选和智能化创建优选和维护维护循环循环反馈反馈无需人工,更优的无需人工,更优的选选择,某渠道择,某渠道1 1月份月份 70%70%的的提升提升量子系统-核心价值 技术和业务以及数据的深度融合将机器学习、大数据分析以及前后端技术,深度结合业务,打磨产品自动化和批量化投放“7X24”小时的自动化和批量化投放,比起传统的人工投放,在效率上实现了飞跃智能化投放引入机器学习,在自动化投放的同时实现更智能化、精细化的投放效果量子系统-业务价值 智能创建实时创建和调控优势有潜力的计划消耗提升消耗提升30%快速反应快速反应流
5、量机会流量机会智能监控以数据驱动广告业务增长提升提升5%利润率利润率ROIROI提升提升智能投放工具极大提升投放效率节省节省2/3时间成本时间成本人效提升人效提升智能化投放系统智能化投放系统“量子量子”带来的业务价值带来的业务价值321量子系统-广告数据流 量子系统-数据架构 量子系统-对查询性能要求 数据量大对接所有国内主流媒体,日投放计划3W+01指标计算复杂、指标多指标计算逻辑复杂,指标数量多02计算延迟要求低广告实时投放、实时监控、实时调整,对计算延迟要求在秒级03高可用要求高涉及面广,一旦出现故障,损失巨大。对高可用要求04量子系统-OLAP演进历程 MysqlMysql01Clic
6、kHouse02HologresHologres03Hive+ClickHouse,微批计算延迟高,运维复杂数据量少、指标计算简单Flink+Hologres,数据计算与查询分离量子系统-Hologres优势 实时olap性能高列存格式配合多种索引,交互式分析性能高主从实例读写分离主从实例读写分离,并分离部署,主从实例之间计算资源不共享fixed plan优化 行存点查使用fixed plan,点查性能好 数据实时UPSERT支持binlog机制支持订阅Hologres Binlog,方便使用flink进行计算量子系统-性能提升 30天内数据实时olap查询P99耗时5秒内,性能提升30%实时
7、olap数据实时计算写入延迟分钟级,控制在1-2分钟内,性能提升15%左右数据延迟计算链路缩短1/5计算链路量子系统-数据高可用 量子系统与数仓 37手游其他olap场景痛点 痛点痛点平台多数据乱管理难impala、druid、ck等,运维等,运维复杂复杂数据同步多、数据数据同步多、数据重复重复权限、资源隔离等管理成本权限、资源隔离等管理成本高高37手游-云原生OLAP优势总结 impala、CK都不需要了,holo都能满足,且只需要写一份数据 数据量小,查询频繁,对延时敏感,使用holo内表 数据量大,对延迟不敏感,使用holo外表 负载隔离,故障隔离,可实现多实例高可用方案未来规划 计算组实例计算组实例测试验证测试验证2测试hologres的计算组实例功能以用于解决多业务间的写写隔离以及更加精细化的资源隔离1AIGC通过AIGC技术,快速生成大量的特定画风的广告素材图片或视频,减少广告创意的制作周期和成本3素材分析素材分析优化、素材优化、素材推荐推荐通过机器学习和推荐算法,根据用户的兴趣和偏好,智能地推荐合适的广告素材,提高广告投放的效果和回报率 THANKS