报告预览

4-网易游戏-网易游戏AI平衡性测试平台-袁冬生林泽聪高柳洋.pdf

编号：29814

PDF 35页 22.60MB 下载积分：VIP专享

下载报告请您先登录！

4-网易游戏-网易游戏AI平衡性测试平台-袁冬生林泽聪高柳洋.pdf

1、MTSC2020中国互联网测试开发大会深圳站TESTING SUMMITCONFERENCE CHINA 20202020.11.20-21中国深圳宝立方国际酒店主办方：TesterHame#page#中国互联网测试开发大会。MTSC深圳站ESTING SUMMIT CONFERENCE CHINA2020网易游戏AI平衡性测试平台袁冬生高柳洋林泽聪主办方：TesterHeme网易游戏#page#中国互联网测试开发大会。MTSC深圳站ESTING SUMMIT CONFERENCE CHINA202平衡性测试、平台设计袁冬生主办方：TesterHeme网易游戏#page#平衡性有多重要？中国互

2、联网测试开发大会MTSC6nq重V一群委置咖笔架士区路回象击技能471091游媒导7+防护最早时期的金身初代彼岸花劝退大量玩家追于平衡性删除的召唤师技能网易游戏主办方：TesterHeme#page#数值投放的平衡性MTSC中国互联网测试开发大会构建数学模型（任何新加入的投放都能融入整个循环）完成任务钻抽卡英雄品质推关挂机资源英雄等级主办方：TesterHeme网易游戏#page#核心玩法（战斗）的平衡性中国互联网测试开发大会MTSC博奔框架平衡苏限到创造表现和体验的多样性打破行动空间的绝对平衡网易游戏主办方：TesterHeme#page#核心玩法（战斗）的平衡性MTSC中国互联网测试开发大

3、会核心战斗平衡性的本质是行动空间求解（即，最优策略循环，让任何行为都有解）e.g.街霸系列的行动空间循环气弹冲刺上段攻上段防霸体升龙跳跃下段攻下段防框架边界的认定？新机制与框架关系的认定？网易游戏主办方：TesterHeme#page#核心玩法（战斗）的平衡性MTSC中国互联网测试开发大会传统的平衡性调整方案-后验带后性、1.玩家奥情反馈测试服、体验服游戏口碑受损2.战斗数据分析传统的平衡性调整方案-先验数据样本过少1.玩家小规模测评（UE测试）2.组内高端玩家测评（策划、QA）网易游戏主办方：TesterHeme#page#平衡性平台目标MTSC中国互联网测试开发大会人力成本节省时间、，1.

4、后验+先验相结合2.足够的先验样本量3.先验测评方达到高玩水平AI网易游戏主办方：TesterHeme#page#基于后验数据的平衡性分析MTSC中国互联网测试开发大会V定制化的平衡性数据分析V全面的游戏平衡性数据统计DC8DOWAAR区DOR公8D口公8D口网08AOWCRYNONNW6NONWR公DONWR3DONWROC网易游戏主办方：TesterHeme#page#基于先验的平衡性分析MTSC中国互联网测试开发大会一弥补基于线上数据调整平衡性的带后性VAI测评结果报告（10000+场数据统计分析）T明海不赛部V用户自定义需评测的装备/单位/阵容/副本让达让会3区公9我区吃明我表印08发

5、发13小时22网易游戏主办方：TesterHeme#page#基于先验的平衡性分析MTSC中国互联网测试开发大会当游戏战斗特征相对简单时，直接给出最优解VAI测评结果报告（以G10为例，1014中的最优解）V用户只需给出待测评对象/全卡池测评NES务皖8校网易游戏主办方：TesterHeme#page#中国互联网测试开发大会。MTSC深圳站ESTING SUMMIT CONFERENCE CHINA2020游戏AI技术原理及实现高柳洋主办方：TesterHeme网易游戏#page#中国互联网测试开发大会AI平衡性分析MTSC技能A胜率生成含技能A阵容对战队伍对战阵容平均胜率NPCA37%陈客1

6、NPCA53%.%0gNPCAI60%阵容1万我方安区对方强化学习武格/战法/装备自动战斗搭配1w阵容100难度NPCAI胜率预测模块网易游戏主办方：TesterHeme#page#MTSC中国互联网测试开发大会为什么要用监督学习：时间成本单局对战时间：240s（有染）0.015s（无漳染553722131时间：1w*0.015*100*20=83h平局平均胜率0.02s时间：83h网易游戏主办方：TesterHeme#page#MTSC中国互联网测试开发大会监督学习数据集胜率预测数据集！阵容数据线上阵容高胜率提取KS200NPC阵容推荐生成战斗低胜率胜率标签数据集分布尽量均匀！网易游戏主办方

7、：TesterHeme#page#中国互联网测试开发大会特征提取MTSC攻防智速最大概率5维攻击范伤害范围伤害系数恢复系数5964维初始战法攻击提升等59个77维特征武将64维特征战法特征国家分桶5维尾性种类5准兵种分桶5维分桶网易游戏主办方：TesterHeme#page#MTSC中国互联网测试开发大会胜率预测网络设计了解对手，胜率才能预测的准输入：阵容武将1对手信息口输出：胜率EM81EMB2EMB3战法1FC提取平均输入FO十胜车阵容sigmoidconcatenateEMB100武将3网易游戏主办方：TesterHeme#page#强化学习MTSC中国互联网测试开发大会为什么要用强化学

8、习：从阵容到胜率的关键卡牌回合制：阵容确定，胜负就确定了强化学习模拟玩家战欢自动战斗热配1w阵容100难度NPCAI胜率预测模块大部分游戏需要战斗过程：胜率可靠操作像玩家口1.随机策略对打2.行为树（游戏内自动3.AI强化学习网易游戏主办方：TesterHeme#page#直观理解强化学习中国互联网测试开发大会MTSC.000000项系数项系数敌方英雄化鲸，不知火.敌方血量3000，2000.5敌方蓝量敌方行动条10.23.敌方攻击力7500,4800.敌方防御力300.200.我方英雄大岳丸，姑获鸟.我方血量2200,1900.6我方鬼火使用了拉条技能根据后面行动获得的Reward动态调整网

9、易游戏主办方：TesterHeme#page#强化学习：算法选择MTSC中国互联网测试开发大会尝试前沿强化学习算法到平衡性测试游戏种：DQN：（eg. Alpha Go）DONDDONoRainbow算法PrioritizedDDONNoobuand2005A3CONFSP（eg.斗地主扎金花德州扑克）DistributiorlDONNoisyDONPOLICYGRADIENT（eg.dota2，星际争霸）OPPO算法OSAC算法等mt100200Millionsof frames网易游戏主办方：TesterHeme#page#强化学习：特征提取MTSC中国互联网测试开发大会特征提取输入信息不

10、选择输入游戏画面因方人物我方故方人物特技列表”C/【E7】6m目料信ng列表般类型列表【5】Buf类道具列上商8【10】法宝列表【11】动作类型列表5宠物列表20Buf英型【E11类型【上sT网易游戏主办方：TesterHeme#page#MTSC中国互联网测试开发大会强化学习：网络设计总特征状态506维政方状态公共状态反方状态特征Relu2层全连拼合层LSTM层SoftMax层1层全连ftMs自自泛化性网络前期固定阵容pvp网络主办方：TesterHame网易游戏#page#强化学习：对手选择MTSC中国互联网测试开发大会根据QualityScore选择对手训练对手多样化避免只学到固定套路目

11、前使用OpenAlfive的self-play策略，历史版本每次被打败都会扣除一定的分数肉计根据评分选择博弃对手，评分越高选中概率越大5eationQuality Scor30书102050苏0使用该方法后，训练过程中释放技能的概率较为均匀，在面对不同版本对手时能够用到不同每一代AIqualityscore分数的套路。网易游戏主办方：TesterHame#page#强化学习：评估方法MTSC中国互联网测试开发大会TrueSkill：与每一代AI对战进行天梯排名评估10Ski Levelu为AI平均水平，0为AI水平的不确定性最新一代AItrue每次对战的输赢会调整口并减小oskill分数变化能

12、够直观反应AI水平变化情况网易游戏主办方：TesterHeme#page#AI平衡性技术汇总MTSC中国互联网测试开发大会平衡性判断监督学习+强化学习超模阵容寻找足025XP马位【战必断金】+【智阵善守】/【单骑救主】，转“轻骑兵”“疾行”，全加攻击。学习“侧击”XP关羽：【课定后动】+【全军突击】/【风仪享】/【一骑当千】/【折就强攻】/【鼎足江东】，转“轻骑兵”：，学习“侧击”“疾行”，适当加速度后全加攻击。上线前判断胜率1.AI对战操作提供连招搭配参考2.判断副本通过胜率是否平衡3.推荐出指定胜率段阵容，推荐超模阵容4.英雄装备技能等上线前平均胜率预测等网易游戏主办方：TesterHem

13、e#page#中国互联网测试开发大会。MTSC深圳站ESTING SUMMIT CONFERENCE CHINA2020游戏AI训练架构和集群部署方案林泽聪主办方：TesterHeme网易游戏#page#AI系统架构MTSC中国互联网测试开发大会平衡性平台后台数操处程11p1评估AI效果Intefligence游戏，一样的训练架构自研强化学习框架采集战斗数据网易游戏主办方：TesterHeme#page#AirintelligenceMTSC中国互联网测试开发大会订单式系统Agent训练难度低，准确率高多游戏兼容采集游戏数据并行的运行在独立的进程中随时中断与恢复训练多进程采集Learner对数

14、据进行训练自动化测试模型支持多机多卡分布式训练Tester对模型进行测试自动对战寻找最优模型会电路网易游戏主办方：TesterHeme#page#订单式系统中国互联网测试开发大会MTSC提交者Ntask”“data”；“ee33ebecbld511ea8c28525488e41c88*“gid”：订单号基本信息usc“：“1inzecong”乐“E37”“aitype”：“hun11”Agent项目代号16训练过程训练参数11episodes：200，12“winrate：8.9，“timelinit：188b8，14“ale”：Learne模型参数训练参数PPOUSON奖励参数“engine

15、_setting：f364365“model_setting：f阵容信息4853.486“rewardsetting：469470游戏参数副本信息471python airin-py-f./json/pvp.json-n test1022账号信息python airin-py -t serversingle网易游戏主办方：TesterHeme#page#中国互联网测试开发大会MTSCAgent虚拟游戏客户端二科品Model同类型游戏自定义算法算法可复用DQNPPC平台适配不同的游戏项目组只需关注Agent的实现网易游戏主办方：TesterHeme#page#MTSC中国互联网测试开发大会Lea

16、rner分布式训练Learner数据并行AgentMemoryPooLearner梯度汇总Leamner网易游戏主办方：TesterHame#page#MTSC中国互联网测试开发大会Tester决策存在克制关系PVE胜率最高模型A模型克制克瓶PVE问题对手确定C模型B模型PVP对手不确定自我博究利用积分系统，计算相对最优的模型网易游戏主办方：TesterHleme#page#MTSC中国互联网测试开发大会集群部署大数据分析数据展示平衡性平台口发送订单暂停与恢复请求战斗数据采集RabbitMQK8SBroker服务TaskQueue任务调度ZeroMQ网易游戏主办方：TesterHeme#page#谢谢THANKS

友情提示

1、下载报告失败解决办法
2、PDF文件下载后，可能会被浏览器默认打开，此种情况可以点击浏览器菜单，保存网页到桌面，就可以正常下载了。
3、本站不支持迅雷下载，请使用电脑自带的IE浏览器，或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩，下载后原文更清晰。

本文（4-网易游戏-网易游戏AI平衡性测试平台-袁冬生林泽聪高柳洋.pdf）为本站（X-iao）主动上传，三个皮匠报告文库仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对上载内容本身不做任何修改或编辑。若此文所含内容侵犯了您的版权或隐私，请立即通知三个皮匠报告文库（点击联系客服），我们立即给予删除！

温馨提示：如果因为网速或其他原因下载失败请重新下载，重复下载不扣分。

上海品茶

4-网易游戏-网易游戏AI平衡性测试平台-袁冬生林泽聪高柳洋.pdf

4-网易游戏-网易游戏AI平衡性测试平台-袁冬生林泽聪高柳洋.pdf