WisdomCode - 基于日志学习的错误预测与故障定位

www.fireknight.tech 个人博客，欢迎访问，CSDN不定期更新

总结
- 使用机器学习，基于日志记录，进行错误预测和故障定位
- 机器学习：分类算法。日志扔进去，分类为正确或错误，属于什么错误
- 训练集：多种错误分别注入，日志收集，对应有故障标签，训练
- 缺陷：首先要有针对某个服务的训练集，其次错误类型相比实际应该很小，跑的时候不一定分的出来
Intro
- 提出了基于执行轨迹日志机器学习的微服务潜在错误与故障根源预测方法
- 故障类型：
  - 多实例故障、系统配置故障、异步交互故障
- MEPFL
- 预测目标
  - 轨迹层级：潜在错误（T/F)、故障微服务、故障类型，微服务层级：微服务的故障类型（使用一组微服务运行时特征预测）
- 过程：
  - 离线训练+在线预测
预测模型：
- 特征定义
  - 轨迹层级
    - [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-9Gr3fg4j-1648632316767)(assets/image-20220330170328-d2xsxh1.png)]
  - 微服务系统层级：
    - 每个服务的RSC、轨迹执行时间、轨迹涉及微服务数、轨迹实例中涉及微服务实例数
- 模型设计
  - 四个分类模型
  - 训练方法：随机森林、K邻近、多层感知机
- 训练集（故障注入）
  - 多种错误分别注入，日志收集，对应有故障标签，训练

WisdomCode - 基于日志学习的错误预测与故障定位相关推荐

基于深度学习的日志数据异常检测
基于深度学习的日志数据异常检测数据对象智能运维(AIOps)是通过机器学习等算法分析来自于多种运维工具和设备的大规模数据.智能运维的分析数据对象多源运维数据包括系统运行时数据和历史记录数据,历史记 ...
擎创技术流 | 基于日志的交换机故障预测
夏洛克AIOps系统,分析包含日志数据.机器数据.网络数据等等在内的多样化数据. 同样,也经由海量数据分析进行多指标的异常预测.故障定位.本文虽然不是夏洛克系统的应用,也为异常检测及预测提供了一种思路 ...
为恶意文件“画像” 瀚思科技基于深度学习技术快速锁定未知威胁
至顶网安全频道 07月26日北京报道:"阿尔法狗"(AlphaGo)的一战成名让很多人记住了人工智能.深度学习.大数据分析等一系列新兴科技热词,而真正要把这些新技术应用到商业领域 ...
基于多任务学习和负反馈的深度召回模型
简介:召回结果的好坏对整个推荐结果有着至关重要的影响,最近的一系列实践和研究表明,基于行为序列的深度学习推荐模型搭配高性能的近似检索算法可以实现既准又快的召回性能:与此同时,用户在天猫精灵上还可以进行 ...
基于深度学习的磁环表面缺陷检测算法
基于深度学习的磁环表面缺陷检测算法人工智能技术与咨询来源:< 人工智能与机器人研究> ,作者罗菁等关键词: 缺陷检测:深度学习:磁环:YOLOv3: 摘要: 在磁环的生产制造过程中, ...
基于深度学习的驾驶行为预测方法
基于深度学习的驾驶行为预测方法 1 概述 2 深度学习算法 3 驾驶行为预测建模 4 结论 5 参考文献 6 python LSTM程序 7 python LSTM模型调用 1 概述在汽车前向仿真中 ...
基于日志的交换机故障预测
女主宣言在当今Web服务数据中心网络中,网络设备的故障已经逐渐成为日常发生的事件.对于故障发生后如何处理,之前已经提出了很多的研究.不幸的是,数据中心部署的互联网服务的性能依然受到影响.本文介绍的是 ...
OCR技术系列之四】基于深度学习的文字识别（3755个汉字）（转）
上一篇提到文字数据集的合成,现在我们手头上已经得到了3755个汉字(一级字库)的印刷体图像数据集,我们可以利用它们进行接下来的3755个汉字的识别系统的搭建.用深度学习做文字识别,用的网络当然是CNN ...
【C4】基于深度学习的心电信号分析
★★★ 本文源自AI Studio社区精品项目,[点击此处]查看更多精品内容 >>> 基于深度学习的心电信号分析一.项目背景近年来,随着人工智能和算法的发展,以机器学习和深度学习 ...

WisdomCode - 基于日志学习的错误预测与故障定位

WisdomCode - 基于日志学习的错误预测与故障定位相关推荐

最新文章

热门文章