面向连接的智能运维体系：阿里大数据运维实践.ppt

《面向连接的智能运维体系：阿里大数据运维实践.ppt》由会员分享，可在线阅读，更多相关《面向连接的智能运维体系：阿里大数据运维实践.ppt（33页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、面向面向连连接的智能运接的智能运维维体系体系 阿里大数据运维实践大大纲纲Big dataops产产品运品运维历维历程程智能运智能运维维理念理念Tesla产产品体系品体系运运维维价价值值重塑重塑01.02.03.04.OTSHadoop0204产产品运品运维历维历程程01 Before 2012人工人工&脚本脚本工具整合，工具整合，业务业务增增长长2016智能运智能运维维体系建体系建设设HbaseGalaxyTTHistore MaxComputeAnalyticDBJstormSLS 032014自自动动化平台化平台2013501/51:1产产品运品运维历维历程程困境 求变 新生2014产产品

2、运品运维历维历程程智能运智能运维维理念理念 是否有可以借鉴？何种智能理念？产品发展方向和终态？智能运智能运维维理念理念末端末端连连接接分析分析展展现现1.末端：直接操作 系统，应用程序，硬件，网络 的产品。2.分析：实现运维人员思考问题，分析需求，排查故障的产品，3.连接：实现分析与末端产品驱动与反馈的连系产品。4.展现：将智能平台的状态 以多种可视化的方式表达出来。AECT-FlowIDPSTDSChangeLineT-cloneStarAgentCMDBICSchangefreeAlimonitorACL智能运智能运维维理念理念T-Flow 工作流工作流 Simple Flow Multi

3、 FlowTesla产产品体系品体系 T-Flow关关键键末端末端产产品品-系系统层统层指令序列指令序列调调度的服度的服务务Simple FlowTesla产产品体系品体系 T-FlowABCparam1Tesla产产品体系品体系 T-FlowSimple Flow Template/home/admin/update -t _%_param2param3自动忽略自动重试异常报警自动忽略超时时间/home/admin/update -t _%_自动重试异常报警cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.2$cluster011.1.1.3$

4、cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.3$clustre011.1.1.7$/home/admin/tools(-p t 3)-data)module1 yum xxx module1)/home/admin/tools(-precheckyum xxx module1)yum xxx module1)yum xxx/home/admin/tools(-postcheck)-restart)/home/admin/tools(-p 1 t 4)Failed/home/admin/tools(-p 1 t 6)/home/admin/t

5、ools(-p 1 t 6)Tesla产产品体系品体系 T-FlowSimple Flow Instance1234Simple FlowInstanceTesla产产品介品介绍绍 T-FlowMulti Flow Instance=Tesla产产品体系品体系 T-Flow案例1.GalaxyUpgradePool2.UpgradeRegionServer3.FlightingUpdatesimple flowsimple flowmulti flowTesla产产品体系品体系 T-FlowTesla产产品体系品体系 T-FlowTesla产产品体系品体系 T-FlowTesla产产品体系品体

6、系 T-Flow30000+实实例运行例运行Tesla产产品体系品体系 T-FlowTesla产产品体系品体系 ICSintelligent Connection ServiceICS关关键连键连接服接服务层务层-解决事件与末端解决事件与末端产产品的品的连连接接监监控事件控事件日志分析日志分析流程事件流程事件AECT-flowNocTesla产产品体系品体系 ICS外部系外部系统统监控系统1监控系统2日志分析1其他第三方触触发发器器监控系统1配置，数据监控系统2配置，数据日志分析1配置，数据其他第三方配置，数据事件事件处处理理插件注册插件注册抑制通知抑制通知事件事件调调度度冲突冲突检查检查K-

7、V 依依赖赖执执行器行器T-flow 执行器接口AEC执行器接口SSH执行器接口消息订阅服务末端系末端系统统T-flowAECPSSHTclone其他末端服务intelligent Connection Service系系统统架构架构Tesla产产品体系品体系 ICSintelligent Connection Service案例盘古分布式文件系统一副本高危事件Tesla产产品体系品体系 ICSintelligent Connection ServiceTesla产产品体系品体系 ICSintelligent Connection ServiceTesla产产品体系品体系 ICSintelli

8、gent Connection ServiceTesla产产品体系品体系 ICSintelligent Connection ServiceTesla产产品体系品体系 ICSintelligent Connection Service容量检查，调参/缩扩容硬件异常,维修下线分布式文件系统副本高危加速修补核心应用服务Hang 紧急轮换Tesla产产品体系品体系 TDS Troubleshoot Decision Service关关键键末端分析型末端分析型产产品品-提供通用提供通用线线上故障智能分析及上故障智能分析及处处理方案理方案Checkpoint配置配置执行类型：Check API，Chec

9、k Script分析结果：example：A，B，C边边条件配置条件配置上游节点：Checkpoint下游节点：Checkpoint/ICS上游结果表达式：case=A，case=C，case=A&B排排查查点点1排排查查点点2排排查查点点3排排查查点点4排排查查点点5日志分析日志分析监监控控报报警警故障工故障工单单ICSTesla产产品体系品体系 TDS Troubleshoot Decision ServiceTDS排排查查点点6排排查查点点7排排查查点点8Tesla产产品体系品体系 AEC&Crond关关键键末端末端产产品品-应应用用环环境境实时维护实时维护 rpm，文件，目，文件，目录录低部署成本，简单通用灰度发布，低消高效规则多样,文件模板多级绑定,灵活组合Tesla产产品体系品体系 AEC&Crond关关键键末端末端产产品品-集中管理集中管理线线上服上服务务器定器定时调时调度任度任务务Crond管理散乱执行结果丢失异常通知机制积累日常任务效果数据D ata运运维维价价值值重塑重塑自自动动化化智能化智能化运运维维价价值值重塑重塑2017T-Flow ICS TDS提供工作流引擎&智能连接服务&智能故障排查服务，面向公有云及中小运规模提供开源版本，共建运维自动化生态代代码码开源开源