腾讯DevOps自动化运维平台_织云PPT课件

服务器运维平台
1 变更的执行和控制 2 自动化合规/策略管理 3 服务器和应用排障 4 提高服务器安全性 5 部署和配置软件
ቤተ መጻሕፍቲ ባይዱ15
© 2007 Opsware Inc. All rights reserved. Proprietary and confidential.
1. 变更的执行和控制
16
© 2007 Opsware Inc. All rights reserved. Proprietary and confidential.
监控组四 运行情况
提交 批处理程序组四
综合业务日终配置流程说明
▪ 通过在PAS系统中，拖拽操作画出自动化作业流程图 ▪ PAS借助connector与各个执行系统，并向他们发送操作指令 ▪ 各个系统执行流程环节上的具体操作，并向PAS返回执行结果 ▪ PAS根据执行结果，判断下一步的执行内容 ▪ 部分操作必须手工执行，则可在流程中设计等待环节，灵活满足客
审视下列问题
在您的数据中心，平均一个主机管理员负责多少台服务器？ 一个主机管理员每天需要进行多少次的Telnet？FTP？ 是否有多主机共享的管理脚本？如何运行？如何共享？ 如何知道操作员进行了哪些操作？如何确保操作是正确的？ 采用何种方式对关键系统配置进行备份/恢复？
日终前 数据镜像
启动 日终服务
执行 完毕
启动日间 报表文件 交易服务 同步
清理 日志信息
提交头寸 生成程序
监控组一 运行情况
日终前 磁带备份
提交 批处理程序组一
故障处理 流程
执行日终后
手工操作
停止
8
数据镜像 反传数据 日终服务 © 2007 Opsware Inc. All rights reserved. Proprietary and confidential.

Hystrix熔断器
Hystrix架构图
服务雪崩效应形成的原因 1
服务提供者不可用 重试加大流量 服务调用者不可用
2 Hystrix的设计原则包括:
资源隔离 熔断器 命令模式
熔断器的概念 3
熔断器即断路器，断路器(Cricuit Breaker)是一种能够在远程 服务不可用时自动熔断(打开开关)，并在远程服务恢复时自 动恢复(闭合开关)的设施，Spring Cloud通过Netflix的Hystrix 组件提供断路器、资源隔离与自我修复功能。
Cloud很大的一部分是基于Spring boot来实现
Spring Cloud组件 一
Spring Cloud Config
配置管理开发工具包，可以让你把配置 放到远程服务器，目前支持本地存储、
Git以及Subversion。
Spring Cloud Bus
事件、消息总线，用于在集群（例如， 配置变化事件）中传播状态变化，可与
我的代码是好的， 要么是你 们部署的姿势不对，要么就 是你们的基础架构有问题
DEV
基础设施肯定是好的， 一定 是你们代码的问题
OPS
微服务带来的测试、集成、构建、部署问题
敏捷测试的方法
TDD(测试驱动开发)
• TDD得原理是在开发功能代码之前，先编写单元测试用例代码，测试代码确定需要编写什么产 品代码。
ZUUL网关
ZUUL架构图
验证与安全保障 1
识别面向各类资源的验证要求并拒绝那些与要求不符的请求。
2 审查与监控
在边缘位置追踪有意义数据及统计结果，从而为我们带来准确的生产状态结论。
动态路由 3
以动态方式根据需要将请求路由至不同后端集群处。

15.启动软件包 16.进程端口扫描 17.上报变更日志
14
一键扩容
ppt课件
15
一致性掌控
• 动态拓扑 • 秒级监控 • 自动修复
User Application
现网数据
数据对比
配置数据
一致性上报
触发流程
so so so Uniq Agent inotify
System Call
动态拓扑
Kernel
• 统一机型 • 标准状态流转机制 • 集群化管理 • 主备责任人
9
CMDB：标准化的落地
角色
分层
对象
系统
业务运维
业务层
组件运维 接入层
逻辑层
数据层
系统运维
系统资源层 设备资源层
网络运维
网络资源层
架构/分布 业务视图 工具执行 外部接口 组件/配置 应用/程序 OS/内核
硬件
业务指标 容灾调度 访问关系
ppt课件
自动修正 16
决策系统
事件 策略 执行 流程
需求 容量系统
• 突发高负载 • 预测高负载 • 低负载>30天
决策API
白名单
决策树（高负载）
1. 平均负载 2. 设备总数 3. 高负载设备数 4. 最高负载 5. 高负载阀值 6. 路由一致 7. 上线时间
决策树（低负载）
1. 平均负载 2. 设备总数 3. 持续天数 4. 路由一致 5. 最低负载
ppt课件
5
标准化实践 CMDB设计 流程系统 决策系统 测试灰度 实战分享
织云架构实践
织云门户
决策系统
流程系统
工 权限系统 文件中心 包系统 具 库 测试工具 设备调度 路由系统

ABTest模块
Atest （实验模型A） Btest （实验模型B）
第一层：统计判别算法
3sigma算法与控制图算法的优缺点
•以当前时刻为标准 数据提取 •七天前后三小时 + 昨天前后三小时 + 今天前三小时
√
Grubbs
• 3sigma原理
×
控制图
•移动平均算法 •指数移动平均算法
第一层：无监督算法
特征工程
分类特征
聚类 Kmeans 分类器
•熵特征 •值分布特征 •小波分析特征
打标工程
1.输出异常视图到前端页面 2.人工确认是否真的异常，假异常则校正 3.后台根据人工校正的结果，存下校正后的所有结果：正常记为1，异常记为0
• •
传统时序监控的问题与新思路 检测算法原理与应用
•
特征工程与打标工程
传统时序监控的问题与新思路 检测算法原理与应用
•
•
特征工程与打标工程
样本库建设与管理
•
Metis概述（智能运维应用实践）
特征工程
特征是数据中抽取出来的对结果预测有用的信息。 特征工程包含了特征提取、特征构建、特征选择等模块
连续特征
离散化
特征监控 初始特征 分布情况
离群点 分布
共线性 缺省值 去均值
第一层：无监督算法
One Class SVM
• 属于无监督算法 • 使用了超平面的思想 • 适用于连续数据的异常检测 • 适用于对样本进行一定比例的筛选 • 寻找高维平面区分正常点与异常点
第一层：无监督算法
Replicator Neural Network
• 属于无监督算法 • 需要构造必要的特征 • 使用了神经网络的思想 • 适用于连续数据的异常检测