1、美团酒旅客户端自动化测试实践目录 CONTENTS01.背景02.技术方案03.系统建设04.落地与规划01背景自动化测试伴随公司成长的复杂度提升特性特性特性特性应用框架特性特性特性特性特性特性特性特性业务发展需求迭代人员迭代体验优化特性特性兼容通过个人能力保证质量越来越难整体优化风险变高自动化测试日常开发的困扰需求开发整体需求不可追溯实现方式不统一影响面难以评估测试case描述过于抽象技术改进这是啥！看不懂！改不动！自动化测试自动化测试的目标需求大道重构保证日常迭代开发质量技术改进做到不错不漏提升老化车辆的行驶速度为车辆检修提供说明书高效完整客观02技术方案自动化测试测试全景图case维护c

2、ase管理case编写case关联case执行case选取编译部署执行结果分析bug提报bug跟踪重运行聚合分析自动化测试case选取基础sdk单元测试覆盖sdk全部功能正确可用业务主流程集成测试保证主流程可用测试粒度宏观介观人力投入微观用户伤害肉体损伤财产损失精神伤害难以完全覆盖 容忍基线测试方案的容忍基线自动化测试case选取单元测试功能测试兼容、稳定性测试性能测试回归测试接口与API测试业务逻辑测试场景测试埋点测试截屏测试Monkey测试性能测试全链路回归测试case编写测试框架基础设施case管理持续集成测试环境自动化测试功能测试用例用户操作网络请求本地上下文测试用例：进入页面执行操作

3、观察结果UI呈现网络请求UI呈现自动化测试初版方案ViewViewModelModelViewdatabindingPresenterModeluser eventsupdates viewupdates modelstate-change events通过触发函数（信号）模拟行为模拟iOSandroidUI呈现验证内存状态（信号）方法调用（参数）网络请求验证方法调用（参数）与实现方案绑定、需要重构抗重构能力差 验证能力有欠缺 代码量大可读性差自动化测试迭代方案ViewViewModelModelViewdatabindingPresenterModeluser eventsupdates v

4、iewupdates modelstate-change events通过触发函数（信号）模拟行为模拟iOSandroidUI呈现验证截图对比网络请求验证方法调用（参数）内存状态（信号）方法调用（参数）自动化测试第三版方案行为模拟UI呈现验证截图对比网络请求本地存储验证方法调用（参数）网络请求对比函数（信号）触发手势触发本地存储对比自动化测试Android实践技术选型测试工具运行环境Mock方式主要优势主要问题RoboletricJVM通过Shadow类及PowerMock可以Mock所有涉及的类 执行速度高效需要构造大量Shadow类 执行逻辑与真实环境存在差异 只能通过属性检查UI 手势受

5、限Espresso真机通过Mockito手势比较完备、有较强拓展性 具有一定的执行中Mock能力 同时支持页面级和流程级测试无法Mock静态方法和final类 在生命周期执行中缺乏Mock能力 UiAutomator Robotium Appium 真机通过代码内置Debug能力及外部Mock Server完全支持黑盒测试 支持跨应用测试（Robotium除外）可Mock范围有限 测试需要走完整流程，执行效率低自动化测试iOS实践技术选型测试工具Mock方式主要优势主要问题KIFOHHTTPStubs OCMock简单，适合快速开发 版本覆盖广 像用户一样操作查找与操作绑定，不灵活 查找方式单

6、一，代码改造成本高 EarlGreyOHHTTPStubs OCMock同步 可见性检查 像用户一样操作 查找与操作分离，更加灵活工具链相对缺失 Appium 通过代码内置Debug能力及外部Mock Server完全支持黑盒测试 支持跨应用测试 工具链完善可Mock范围有限 测试需要走完整流程，执行效率低 Python脚本，学习成本自动化测试Mock上下文系统对象方法APK对象方法APKfinal类、静态方法系统静态方法Mockito静态插桩静态方法及final类暂不处理生命周期内返回值mock启动待测App替换App持有对象测试执行启动待测页面替换页面持有对象执行测试制作Mock对象设置插

7、桩类返回启动测试App启动测试页面测试执行通过请求参数建立 对象返回值映射关系自动化测试模拟操作注册动作测试线程UI线程注册断言等待空闲定位控件执行动作等待空闲定位控件判断断言定位控件espresso手势执行流程默认实现：MainLooper没有需要立即执行的message，AsyncTask对应的线程池中无正在执行和需要执行的任务 异步IO线程延时动画React Native空闲AsyncTask线程池为空Looper队列无立即执行任务IdleResource.isIdleNow()全部为true自动化测试模拟操作注册动作测试线程UI线程注册断言等待空闲定位控件执行动作等待空闲定位控件判断断

8、言定位控件espresso等待机制改进动作等待条件断言等待条件动作等待条件断言等待条件空闲AsyncTaskLooperIdleResource.isIdleNow()RN LooperIO线程池自动化测试模拟操作原有拓展Click DoubleClick LongClick TypeText Swipe RepeatUtil PrecisionTouch PrecisionSwipe WrapperAction提供更多常用手势兼容非Android标准操作（screenshot等）定位控件判定约束注入MotionEvent通过插桩修改约束自动化测试iOS-EarlGrey对RN的支持自动化测试

9、截屏验证WindowManagerGlobal获取全部Window并截屏PC存储空间imageMagick参考图实际效果Diff分析FBSnapshotiOSandroid03系统建设自动化测试下一步还缺什么？自动化测试下一步RDQA测试用例编写代码编写提PR发版集成/打包交付QA自动化测试编写QA黑盒测试人工测试静态检查QA稳定性和兼容测试获取自动化测试结果拉取case信息测试框架AdenCI核心指标系统case编写、管理和筛选场景设计的质量管控测试进度查询case信息获取运行RD白盒测试上报测试结果上报测试结果 生成测试报告准入判断精准测试自动化测试如何运行-CI并发重试+自动化测试如何运

10、行-并发1359个Case执行时间0s1125s2250s3375s4500s5625s6750s7875s9000s并发路数0自动化测试如何运行-减少失败重试CIcase编写规范setup和teardown自动化测试如何运行-CI单业务线实施case1000个并发8路+编译5分钟case运行15分钟+=总耗时20分钟自动化测试如何协作-以前的方式没有Case ID，RD的自动化测试代码无法与case做关联版本变更只有简单的文字说明，难以做测试代码维护无法产生QA和RD的协同自动化测试如何协作-业内系统结构化文本不直观，不易读多媒体展示差存量case难以迁移多版本并行支持

11、差无法支持截图对比测试自动化测试如何协作-Aden取名字自Aden港，意为Case的集散地提供case和case集管理，自动化测试和手动测试管理协同功能自动化测试如何协作-Aden用户SSO权限日志集团设施图片服务GitCICase管理测试框架支持UI测试系统测试结果管理指标系统功能系统前端展示层基础服务接口服务Case集管理核心指标系统Bug管理系统CI自动化工具自动化测试如何协作-Aden采用脑图做线上case管理系统为每个case生成唯一ID通过标签等支持灵活的测试集组合自动化测试如何协作-Aden多版本支持每个版本都有一个副本，相同case保持id不变写时复制，减少存储自动化测试代码仓

12、库分支保持和测试集一致自动化测试如何协作-Aden自动化测试如何协作-Aden04落地与规划自动化测试人效测试代码编写时间/开发时间0%10%20%30%40%度假某页面度假某筛选列表页31.61823.7控件定位工具37%自动化测试落地效果-某列表页重构检出率02468iOSAndroid人工检出自动化检出失效率Android共120个case，失效3个iOS共103个case，失效1个自动化测试将来的路-录制case？住宿度假交通录制引擎回放引擎管理系统事件录制用户事件数据录制API请求地理坐标私有API管理事件回放数据回放其他校验API参数校验case存储case关联case分发弹窗页面跳转UI变化页面参数缓存测试报告结果上报通知报警RD、QA录制用户反馈Q&A