看DLI服务4核心如何提升云服务自动化运维

DLI是支持多模引擎的Serverless大数据计算服务，免运维也是其作为Serverless云服务面向客户时的一个重要的特性。那么对于服务本身我们是如何实现整个服务的运维呢？今天我们来说说DLI是如何实现监控告警来提升整体运维能力，从而为客户更好的提供Serverless的DLI。

上图是DLI服务的整体部署架构，作为Serverless服务其全面拥抱云原生技术，无论是对外提供任务管理的微服务还是最终执行任务的计算单元，其都是基于Kubernetes来部署，这也更好的实现了Serverless的快速弹性伸缩。

对于DLI服务的监控告警我们当前主要从以下几个方面来考虑：

1. 全局维度，主要是整体API的QPS、成功率和响应时延

DLI作为Serverless大数据计算服务，其对外均以REST API的形式提供服务，因此API的QPS和响应时延直接反映了服务对外的能力，而成功率更是服务SLA的直接体现。

2. OS维度，主要是容器宿主的CPU使用率、内存使用率、磁盘使用率、上下行流量

无论部署的架构、技术如何演进，对基础资源的监控都是最基本和必须的。

3. 容器维度，主要是CPU使用率、内存使用率、K8s空间和用户空间使用率、POD的健康度

容器是虚拟机的演进，因此对于容器的资源监控也是最基本的。我们的微服务或计算单元都是以容器运行在Kubernetes集群上，因此对于POD的健康状态的监控也是必须的。

4. 微服务维度，主要是流量、性能、健康检查和关键日志等

监控是为了更好的发现和解决问题，因此核心还是业务层面的监控。DLI是一个复杂的分布式Serverless应用，其内部根据不同领域模型又分为不同的微服务，因此对于微服务内部的流量、性能等的监控则是衡量各微服务可靠性的重要指标。一个好的系统往往有完善的日志体系，通过对关键日志进行监控则能够帮助我们快速发现和定位问题，因此这也是我们在业务维度的监控上的重点。

上述几个方面的监控，是我们实现云服务自动化运维的一些关键步骤，通过这些我们能够做到更好的先于客户发现问题，保障服务SLA。当然这些远远不够，正所谓“路漫漫其修远兮，吾将上下而求索”，更加自动化、智能化的运维才是Serverless服务的目标。

点击这里→了解更多精彩内容

看DLI服务4核心如何提升云服务自动化运维相关推荐

技术沙龙|京东云DevOps自动化运维技术实践
自动化测试体系不完善.缺少自助式的持续交付平台.系统间耦合度高服务拆分难度大.成熟的DevOps工程师稀缺,缺少敏捷文化--这些都是DevOps 在落地过程中,或多或少会碰到的问题,DevOps发展任 ...
自动化运维-----项目实战: 基于Ansible的云平台自动化运维系统
文章目录项目实战: 基于Ansible的云平台自动化运维系统一.项目介绍 1.项目介绍 2.项目背景二.项目环境搭建 1.项目目录的配置 2.远程服务器虚拟环境的配置 3.MySQL数据库配置 ...
魅族容器云平台自动化运维实践
2019独角兽企业重金招聘Python工程师标准>>> 导读魅族容器云平台主要是基于 k8s 的技术.将从以下六个方面介绍魅族容器云的实践过程,分别是基本介绍.k8s 集群.容器网 ...
云时代，运维要么自己写代码，要么开发替你写了
作者 | 阿里云弹性计算团队这是最好的时代,运维向更专业的方向发展. " Ops 之前不是一个专业,它只有经验,现在是在把经验变成专业,对外提供标准化服务."我的同事.阿里云弹性 ...
秒云获得阿里云首批产品生态集成认证，携手阿里云共建云原生智能运维生态服务
近日,成都元来云志科技有限公司(以下简称"秒云")的云原生智能运维中台产品与阿里云计算有限公司(以下简称"阿里云")的阿里云容器服务 ACK 经过严格测试程序, ...
秒云获得阿里云首批产品生态集成认证，携手共建云原生智能运维生态服务
近日,成都元来云志科技有限公司(以下简称"秒云")的云原生智能运维中台产品与阿里云计算有限公司(以下简称"阿里云")的阿里云容器服务ACK经过严格测试程序,完成 ...
嘉为蓝鲸CMP：跳出云管看云管（运维/混合云/一体化）
一.混合云管是大势所趋 (以下部分内容来自twt社区邓毓同学的分享内容,若有侵权,请联系删除) 随着各行业的业务的发展和技术的进步,公有云.私有云.混合云技术的应用也越来越广泛.云计算为企业带来了快速 ...
为云服务立规矩——首批可信云服务认证名单公布
俗话说,没有规矩不成方圆.在云服务蓬勃发展的今天,无论从规范行业发展,还是为用户提供保障,推动政府云服务采购的角度来说,云服务市场都需要立规矩. 7月15日至16日,以"可信中国云,未来新生 ...
云原生背景运维转型之 SRE 实践
作者:yorkoliu,腾讯 IEG 业务运维专家一.前言上一篇文章<云原生背景下的运维价值思考与实践(上)> 重点介绍了云原生背景下运维转型的思考,围绕着整个 DevOps 交付链, ...

看DLI服务4核心如何提升云服务自动化运维

看DLI服务4核心如何提升云服务自动化运维相关推荐

最新文章

热门文章