1、GOP S 全 球 运 维 大 会 2019上 海 站GOP S 全 球 运 维 大 会 2019上 海 站砥砺前行：华泰证券技术运营实践与探索之路GOP S 全 球 运 维 大 会 2019上 海 站目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4GOP S 全 球 运 维 大 会 2019上 海 站涨乐财富通介绍 运营数据下载量4800+万月活750+万公司客户交易人数占比87%获奖情况2018年度券商优秀APP2017年度最佳金融APPGOP S 全 球 运 维 大 会 2019上 海 站涨乐财富通业务业务保障级别期货沪深港股全球科创板新三板行情港股通普通买卖融资融

2、券打新神器大宗交易国债交易工资定投公募基金私募基金天天财养老专区闲钱理财理财网上开户账户管家资产分析我的账单业务办理风险评估账户快讯热门财经要闻专区自选资讯涨乐吧热门概念资讯优惠价消息推送智能选股Level2乐米涨乐会员其它GOP S 全 球 运 维 大 会 2019上 海 站目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4GOP S 全 球 运 维 大 会 2019上 海 站行业现状-客户投诉GOP S 全 球 运 维 大 会 2019上 海 站行业现状-监管压力2018年年7月月23日，日，XX证券发生信息安全事件，导证券发生信息安全事件，导致集中交易系统部分中断致集

3、中交易系统部分中断10分钟。分钟。违反了违反了证券期货业信息安全保障管理办法证券期货业信息安全保障管理办法（证监会令第（证监会令第82号）（以下简称号）（以下简称管理办法管理办法）第二十四条规定。根据）第二十四条规定。根据管理管理办法办法第五十条的规定，深圳证监局决定对第五十条的规定，深圳证监局决定对XX公司采取出具警公司采取出具警示函的行政监管措施。示函的行政监管措施。2018年12月24日，XX证券集中交易系统中断37分钟，2019年2月26日，XX公司综合账户管理系统发生故障，影响交易时间累计13分钟。违反了证券期货业信息安全保障管理办法（证监会令第82号）第二十四条的规定。依据证券期货

4、业信息安全保障管理办法第四十八条第二款、第五十条和证券期货业信息安全事件报告与调查处理办法（证监会公告201246号）第三十条的有关规定，辽宁证监局决定对XX公司采取责令改正并定期报告的监管措施。2018年12月24日，XX证券信息技术运维人员XXX违反所在证券公司信息安全管理规定，在交易时间对生产环境中的存储过程进行运维操作，引发公司网上交易系统和移动终端交易系统客户端登录异常的风险事件。涉事技术人员被浙江证监局出具警示函并记入证券期货市场诚信档案。违反了证券期货业信息安全保障管理办法(证监会令第82号)第二十四条的有关规定。根据证券期货业信息安全保障管理办法第五十条、证券期货业信息安全事件

5、报告与调查处理办法(证监会公告201246号)第二十六条的规定，浙江证监局决定对你采取出具警示函的行政监管措施，并记入证券期货市场诚信档案。GOP S 全 球 运 维 大 会 2019上 海 站行业现状-行情波动GOP S 全 球 运 维 大 会 2019上 海 站复杂的业务5000+条测试用例复杂的系统8个机房，1500+服务器频繁的变更全年变更800+运维的挑战-系统现状GOP S 全 球 运 维 大 会 2019上 海 站运维过程中的难题故障问题定位耗时太长无法从客户视角感知系统健康状况缺乏贴近实际业务的监控方法服务端架构物理隔离，还会出现故障蔓延GOP S 全 球 运 维 大 会 20

6、19上 海 站目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4GOP S 全 球 运 维 大 会 2019上 海 站技术运营概览机房服务器交换机防火墙负载均衡虚拟化操作系统通讯线路IP地址基础架构硬件属性地域分布应用属性业务属性流程管控状态信息配置信息资产信息配置&流程应用高可用用户体验业务连续性系统健康度风险量化运行管理早间巡检值班补丁安装基础运维基础监控客户端监控服务端监控监控体系变更流程灰度发布风险管控变更管理事件知识库事件处置事件分析事件管理应急预案演练报告混沌工程应急演练容量指标基线管理扩容缩容系统容量立项预算成本成本管理GOP S 全 球 运 维 大 会 20

7、19上 海 站客户端监控客户端指标业务感知 真实客户业务感知 UI测试用例 视频留存 崩溃率 耗时 机型分布 地域分布 版本分布服务端监控基础指标应用指标业务指标 cpu，mem tcp http ping 可视化监控 服务器 交换机 负载均衡 防火墙 吞吐量 耗时 错误数 日志 时间序列异常检测 全业务链监控监控体系GOP S 全 球 运 维 大 会 2019上 海 站可视化监控案例-系统拓扑GOP S 全 球 运 维 大 会 2019上 海 站全业务链监控案例-设计思路GOP S 全 球 运 维 大 会 2019上 海 站全业务链监控案例-落地情况GOP S 全 球 运 维 大 会 201

8、9上 海 站全业务链监控案例-桑基图GOP S 全 球 运 维 大 会 2019上 海 站时间序列异常检测案例-业务周期性GOP S 全 球 运 维 大 会 2019上 海 站时间序列异常检测案例GOP S 全 球 运 维 大 会 2019上 海 站时间序列异常检测案例-检测模型模型模型适用场景适用场景新标签对一段时期内新出现的标签（请求号、功能号、错误号）进行揭示，可以关注到系统中不同以往的事件点。动态阈值利用历史数据，自动计算出上下限。对突破上下限的情况，进行告警。非常适合请求耗时这样比较稳定的指标，也可以用于请求量突破历史极限等情况的发现。请求有无不关注请求的量，关注请求是否出现。通过历

9、史数据，计算出请求出现的概率。可以用于监控关键时刻（如开闭市）关键请求是否出现。周期很多请求具有较强的周期性，通过历史数据，计算出中位线和波动范围，对突破正常范围的情况进行揭示。GOP S 全 球 运 维 大 会 2019上 海 站真实客户业务感知案例GOP S 全 球 运 维 大 会 2019上 海 站变更流程自测&系统集成测试变更申请验收测试变更&验证 升级说明 SLA 自测报告 部署方案 回退和应急方案 测试需求评审 测试方案 风险评估 关联系统 功能测试手工和自动化用例 回归测试日志回放 性能测试 混沌测试 恢复发布 健康检测 流量镜像 业务监控GOP S 全 球 运 维 大 会 20

10、19上 海 站自动化变更案例研发侧IT资源管理系统自动化服务平台变更墙变更流程变更指令变更结果变更内容变更通知GOP S 全 球 运 维 大 会 2019上 海 站应用高可用两地三中心部署两地三中心部署全链路调用关系绘图全链路调用关系绘图丰富的测试演练手段丰富的测试演练手段多层次的运行监控维护多层次的运行监控维护01020304GOP S 全 球 运 维 大 会 2019上 海 站强弱依赖关系&混沌工程案例-故障蔓延GOP S 全 球 运 维 大 会 2019上 海 站强弱依赖关系&混沌工程案例-设计思路交易MobileStock行情MobileStock资讯MobileStock涨乐UI自动

11、化用例测试集标记页面步骤标签程序交易主站日志行情主站日志资讯主站日志映射页面与接口调度程序涨乐页面与接口映射关系集GOP S 全 球 运 维 大 会 2019上 海 站强弱依赖关系&混沌工程案例-演练思路GOP S 全 球 运 维 大 会 2019上 海 站目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4GOP S 全 球 运 维 大 会 2019上 海 站应用CMDB的完善，与监控、变更等系统的联动GOP S 全 球 运 维 大 会 2019上 海 站建立系统健康度评估模型GOP S 全 球 运 维 大 会 2019上 海 站其他 全业务链监控体系的完善 告警智能分析和收敛时间维度、纵向维度、横向维度 故障自愈 GOP S 全 球 运 维 大 会 2019上 海 站Thanks高效运维社区开放运维联盟荣誉出品