Download as PDF, PPTX
Uploaded byKen Liu
盛大游戏运维体系
盛大游戏的运维体系涵盖服务器虚拟化、自动化管理和监控，致力于提高运维效率和稳定性。通过引入ITIL等最佳实践，系统地推动事件管理、问题管理和变更管理等流程的实施，保障服务的稳定和成熟。未来展望强调持续发展，专注于运维和监控的自动化。
盛大游戏运维体系
- 1.
- 2. Agenda 盛大游戏运维体系综述 分子系统介绍 游戏运维体系未来展望
- 3. Agenda 盛大游戏运维体系综述 分子系统介绍 游戏运维体系展望
- 4. 盛大游戏运维体系发展历程 可管理 可控制 为了更好支持快速发展的业务，运维工作必须朝着规范 化、标准化、可管理的方向发展，08年起盛大也逐步引 入ITIL、安全标准等理念，打造盛大模式的运维体系 可操作 随着自动化体系日益丰富，盛大开始建立报警和监控 系统，快速准确地发现和定位故障，提高运维稳定性 自2004年开始，随着服务器数量的快速增长，盛大着手建立 游戏远程操作平台，使运维逐渐摆脱依赖人海战术的模式， 提高生产效率
- 5. 盛大游戏运维体系-四大主要部分 • 服务器虚拟化 • 盛大监控服务体 • Octopod 系 • Autopatch • Uniweb • 等等 自动化 自动化 管理 监控 流程管 安全管 理 理 • 事件管理 • 安全审计 • 问题管理&知识库 • 应用安全 • 变更管理 • 系统安全 • 配置管理 • 网络安全
- 6. Agenda 盛大游戏运维体系综述 分子系统介绍 游戏运维体系未来展望
- 7. 服务器远程操作平台--Octopod 自动化 自动化 Octopod是盛大自主研发的服务器远 管理 监控 程管理系统，系统管理员无需再服 流程管 理 安全管 理 务器现场即可完成所有操作。 Octopod Server 远 程 用户管理 信息管理 操作管理 补丁管理 日志管理 游戏管理 桌 面 基础框架 Octopod Client 通讯层 基础层
- 8. 服务器虚拟化软件系统 盛大积极倡导虚拟化技术的运用： 自动化 自动化 管理 监控 • 虚拟化软件采用了盛大自主研发的虚拟化 流程管 安全管 操作系统 理 理 • 虚拟化管理系统和盛大的服务器管理系统 进行无缝的整合
- 9. 服务器虚拟化软件系统 盛大自2007年起建设和推广服务器虚拟化软件系统， 实现了以下目标： •可将目前一主流台服务器虚拟成独立的多台不等的服务 高效 器 •极大地提高了服务器的部署效率 节地 •大量节约服务器数量； •大量节约机柜数量 节能 •大量节约电力
- 10. 盛大游戏客户端补丁自动更新系统 盛大游戏客户端补丁自动更新系统可实现用户 自动化 管理 自动化 监控 管理、版本管理、补丁上传下发及校验等 流程管 安全管 功能。 理 理 …………… DLC前台服务器组 传奇世界 冒险岛 彩虹岛 英雄年代 泡泡堂 热血传奇 任务信息 备份 DLC后台服务器组 Master Slave 管理系统 Patch文件 …………… Autopatch服务器组 SVN
- 11. 盛大业务运维监控体系 盛大业务运维监控体系有针对性地对所有可 自动化 自动化 能影响游戏运营的因素进行全方位的监控 管理 监控 和数据采集、分析，目前能展示10万多条 流程管 理 安全管 理 再现人数和性能曲线，监控覆盖率达 100%，报警有效率达70%以上。 •游戏客户端质量监控 游戏客户端 •游戏服务器端程序监控 游戏服务器端应用 游 •系统日志的收集和分析 戏 人 系统程序 数 •游戏服务器健康检查 监 和性能监控 •网络设备和流量监控 控 服务器、网络设备 硬件 •IDC网络质量监控 •IDC机房连通性监控 机房、链路
- 12. 盛大业务运维监控体系 盛大业务运维监控体系的监控范围包括： 游戏在线人数监控； 游戏服务器端程序监控； 游戏服务器健康检查和性能监控； 系统日志的收集和分析； 网络设备和流量监控； IDC网络质量监控； IDC机房连通性监控； 其他专项业务监控
- 13. 盛大业务运维监控体系 盛大业务运维监控体系的系统特点如下： 从客户端到服务器端的完整覆盖； 支持统一的监控策略配置和完整性检查； 丰富的监控曲线展示界面； 海量报警信息的有效关联和过滤； 与ITIL事件管理紧密结合，报警自动转化为应急响 应工作平台的事件单 7*24小时处理。 玩家 玩家 玩家 玩家
- 14. 运维安全体系 自动化 自动化 管理 监控 流程管 安全管 安全审计 理 理 内部用户登录审计、外部用户权限审计、内部用户操作行为审计 应用安全 系统安全 网络安全 •Web漏洞扫描 •补丁分发管理 •Webshell监控 •主机访问控制 •ARP攻击测试 •渗透性测试 •病毒扫描 •DDOS攻击防御 •Web代码审计 •漏洞跟踪 •网络访问控制 •网络流量分析
- 15. 运维安全-网络安全 网络安全 ARP攻击检测 DDOS攻击防御 网络访问控制 网络流量分析 ARP攻击监控 DDOS攻击 网络访问 网络流量分析 报警 防御 控制 • 自研开发每3 • 千兆级抗 • 防火墙实现 • 基于Netflow自 分钟检测一 DDOS设备 研开发 次 +ACL过滤常见 • 交换机ACL实 • 实施完成后通 攻击 现 过快速分析异 常流量 • 发现攻击及 • 旁路式全局 • 迅速定位攻击 时上报至应 DDOS流量清 类型及时响应 急响应平台 洗
- 16. 运维安全体系-系统安全 系统安全 补丁分发管理 主机访问控制 病毒扫描 漏洞跟踪与预警 补丁管理 主机访问控制 病毒扫描 漏洞跟踪 • 基于Octopod • Uinx/Linux采用 • 统一的病毒库 • 跟踪国外安全 iptables实施控 升级策略 机构最新漏洞 • 万台服务器补 制 丁快速分发安 • 统一的全网病 • 跟踪黑客群体 装与检查 • Windows采用 扫描策略 最新动向 ipsec实施控制 • 统一的事件上 • 跟踪最新0day 报应急响应平 台策略 • 及时预警采取 应对方案
- 17. 运维安全体系-应用安全 应用安全 Web漏洞扫描 Webshell监控 渗透性测试 web代码审计 Web漏洞扫描 Webshell监控 渗透性测试 网站代码审计 • 发现和消除网 • 自研开发，对 • 定期对内部系 • 通过网站上 站安全漏洞 公司网站每小 统进行安全性 线前的代码 时扫描一次 测试 检查机制 • 自动化工具定 • 查找权限问题 期扫描 • 统一的网站检 • SQL注入 • 及时处理网 测策略 • 跨站脚本 站存在安全 漏洞 • 检测报警上报 • 及时修补安全 应急响应平台 问题
- 18. 运维安全体系-安全审计 安全审计 内部用户登录审计 内部用户权限审计 内部用户操作行为审计 登录审计 权限审计 操作行为审计 • 实现对服务器登录日 • 实现对用户访问服务 • 实现对windows图形 志的审计 器权限的审计 环境屏幕录像审计 • 实现对Octopod操作 • 实现内部应用系统登 • 实现对用户访问内部 日志的审计 录日志的审计 应用系统的审计 • 实现内部应用系统操 作行为的审计 • 审计登录中存在的异 • 审计出不合理的权限 常的行为 • 消除安全隐患 • 审计异常和违规的操 作行为
- 19. 运维服务管理体系 自动化 自动化 随着系统、技术的日益复杂，维护水平要求的 管理 监控 逐步提高，盛大运维团队借鉴业界最佳实践 流程管 理 安全管 理 ITIL的理念，从人员、流程、技术等各方面着 手，逐步提升管理能力，以有限的人力支持不 断扩展的游戏数量。 调整组织结构，以适应业 务和流程的需求，并实现 量化考核 人员 以服务导向取代技 术导向 通过合适的技术，固化流 程，以及提升自动化程度 服务 参考业界最佳实践， 建设规范化流程 技术 流程
- 20. 运维服务管理体系 借鉴ITIL等业界最佳时间，技术保障中心开发实施了事件管理、问题管理、 变更管理、配置管理等流程，通过一系列平台的推广使用，配合相应管理制度、 流程的推行，使得所提供的服务日趋稳定和成熟。 配合建立的知识库，提供了经验、技能的沉淀模式，有助于人员的培养。 IT服务管理体系 变更请求 报警事件 A Group A Group 变更请求 Group A Service Continuity Management Information Lifecycle Management 事件管理 问题管理 变更管理 监控体系 设备管理平台/ 知识库 数据采集/校验 配置管理数据库
- 21. Agenda 盛大游戏运维体系综述 分子系统介绍 游戏运维体系未来展望
- 22.
- 23. 盛大游戏运维体系框架—建设重点 持续发展体系框架下的各模块： 运维自动化 服务器自动安装 服务器虚拟化推广 系统软件自动安装 应用软件自动安装和版本管理 客户端补丁自动更新 监控自动化 全景监控策略配置和监控展示 流程管理 服务导向为核心，建设服务保障 平台
- 24.