本文为日志易创始人兼CEO陈军,在2016年GOPS全球运维大会.深圳站的演讲实录,主要讲述日志易产品在金融机构、运营商、电网的应用案例。

客户案例

案例一:某大型综合金融机构

这是一个大型的综合金融机构,总部就在深圳,也是中国最大的。
他们之前需要逐台去登录服务器:没有办法集中查看日志;没有办法对海量日志进行挖掘和用户行为分析; 而且没有办法做多维度的查询,比如时间段、关键词、字段值;而且没有办法进行日志的业务逻辑分析和告警。

使用日志易产品后:建起日志云,在内部建立了一个私有云来处理日志,已经接入了一百多个应用,每天新增的日志量是8TB。做了这个之后的好处是省去了登录服务器的操作,就能够快速地查看,降低登录服务器的人为误操作的概率。对金融系统来说,这些生产线上的服务器是非常关键的。如果每个运维工程师都登录到生产线上的服务器去查看日志,一不小心,一个误操作,可能就影响了生产线上的应用,就导致一次事故。上了日志易之后,就禁止运维工程师登录服务器去看日志,所有看日志就在它内部的日志易云上来看,解决了需要日志统一管理的痛点。而且可以进行多维度的查询,提高定位异常原因的效率,可以对日志数据进行数据挖掘、用户行为分析,可以对系统的健康指数每天出报表。
现在很多用户用日志易主要的一个功能是每天出报表给老板看,因为之前是用Hadoop,Hadoop是第二天出昨天的报表,用了日志易之后是当天6点钟的时候就可以出报表,让老板下班前看到当天的情况。而且可以是事先告警,只要一出错,就马上告警,而不是事后去追查这个问题。

案例二:中移动某省分公司

用来分析营业厅业务办理的Web的日志,这里就用了SPL搜索处理语言,营业厅里面一笔交易是经过多个子系统的,每一个子系统都会产生日志。用了之后,就把一笔交易的每一笔子系统产生的日志给串起来,串起来之后还原成一笔交易,分析一笔交易的延时情况、响应情况。

这就是在搜索框里写的,这还是比较短的,它搜索的字段就是“json.url”,通过管道符把前面搜索的结果传给后面的事务命令。因为不同子系统的日志都传给命令了,这个命令执行的操作是找ID,因为每一笔操作都是有一个独立ID的,根据这个ID把这一笔交易在不同子系统上产生的日志都串起来。串起来之后排一个顺序,是以查询作为起点,传入参数,事务命令的参数有stamp,还有ends,一笔事务是从查询开始的,以提交作为结束。但是如果一直不提交也会超时,超时间的时间是30分钟,如果30分钟都不提交,就认为这笔事务就够了,就超时了,这样就不会无限地等下去。通过这样一个事务的命令,把这个交易给串起来。

这就是串起来之后的结果,这是我们的界面,这就是在搜索框里刚才写的搜索处理语言的程序,出来的结果就把这些交易全都串起来,一笔缴费业务,营业员所有操作都一目了然。它还得监控这些营业员,看这些营业员各自的效率怎么样。每个步骤所需要执行的时间都排好,包括网络处理时间、服务器处理时间,都排好序。这就是我们在中国移动山东省分公司做的一个案例。

案例三:国家电网

日志易产品主要用在安全信息事件管理,因为终端信息安全是日志的调查、分析、取证,它要到各省分公升去做审计,快速排查日志里的问题。

合作客户


日志易提供部署版产品,SaaS版产品在阿里云的体验入口:点我

日志易简介:

日志易专注日志分析领域,产品做得像Google搜索引擎一样强大、灵活、易用。目前,日志易产品已成功应用于金融、能源、运营商及互联网等诸多行业,其中金融客户包括中国银行、新疆农信、鹏华基金及第三方支付公司等;能源行业客户已囊括国家电网、南方电网、中石油、中石化等国内知名企业;移动、电信等国内主流运营商以及小米、乐视、网宿科技等诸多明星互联网企业均已牵手日志易——目前日志易大客户已达百余家。

日志易对运维日志及业务日志进行实时采集、搜索、分析及可视化等,用于运维监控、安全审计、业务数据分析,最终发掘出数据价值。

(案例篇)日志易:IT运维分析及海量日志搜索的实践之路(下)相关推荐

  1. 运维人必备:日志分析工具日志易之银行业解决方案

    运维人必备:日志分析工具日志易之银行业解决方案 银行和金融服务行业面临着因为技术革新带来的许多挑战和机遇.系统每天产生数以 TB 计的交易.支付.渠道等各种日志数据.银行机构必须为迅速增长的海量数据建 ...

  2. iis日志字段解析 网站运维工具使用iis日志分析工具分析iis日志(iis日志的配置)

    网站运维工具使用iis日志分析工具分析iis日志(iis日志的配置) https://www.cnblogs.com/fuqiang88/p/5870306.html 我们只能通过各种系统日志来分析网 ...

  3. 史上最全的sqlserver运维分析工具,汇总都在这里了,适合sqlserver的dba人员

    比较常用的sqlserver运维分析语句 SELECT TOP 2000 ST.text AS '执行的SQL语句',QS.execution_count AS '执行次数',QS.total_ela ...

  4. 监控易金融行业运维解决方案:信创国产化 时不我待

    2020年末,黑客利用美国"太阳风"(SolarWinds)公司的"猎户网络"(Orion Network)管理平台,成功入侵了美国财政部.国土安全部等多家美国 ...

  5. 《Linux运维篇:Linux系统运维指南》

    一.Linux运维之知识篇 二.Linux运维之系统篇 <Linux运维总结:使用U盘制作Linux镜像> <Linux运维实战:创建LVM挂载到指定目录> <Linux ...

  6. mysql 二进制日志变化_MySQL运维之二进制日志

    MySQL二进制日志里保存会造成或可能造成数据变化的SQL语句.通过二进制日志可以完成如实时异地容灾备份.读写分离.数据恢复等功能.下面,我们一起来看看Mysql二进制日志. 开启bin-log日志 ...

  7. 运行无间:阿里巴巴运维保障体系的一种最佳实践

    本文根据 GOPS2017·上海站演讲<阿里巴巴运维保障体系的一种最佳实践>整理发布 前言 阿里巴巴全球运行指挥中心,GOC (Global Operations Center)保障阿里经 ...

  8. 登录日志怎么实现_运维必看:日志标准化必须面对的 4 类问题

    朱林 高效运维 作者介绍:朱林,日志及数据分析专家,<Elasticsearch技术解析与实战>作者,对安全技术.数据分析有较深的研究,拥有15年数据分析及安全产品开发经验. 引言 在很多 ...

  9. 请写一篇的关于网络运维的实习周记

    这是一篇关于网络运维实习周记的范例: 周一: 今天是我网络运维实习的第一天.我先参观了整个公司的网络基础设施,了解了公司的网络拓扑结构以及各个部门的网络使用情况.随后,我和我的导师一起进行了一些基础的 ...

  10. windows服务器日志文件定期清理,运维编排场景系列-----定时清理Windows服务器日志...

    本文介绍在运维编排OOS的控制台,通过OOS服务下的定时运维功能,定时执行一个功能性模版,实现某些需定时管理服务器或定时管理其它服务的需求. 应用背景 运行中的实例内部运行了很多服务程序,随时间的推移 ...

最新文章

  1. 17篇论文入选CVPR 2019,百度AI都在关注什么?(附论文地址)
  2. 如何判断UIViewController的视图是否可见
  3. 浅谈Base64编码[转]
  4. 一些OEM的厂商的漏洞分析
  5. WCF开发实战系列四:使用Windows服务发布WCF服务
  6. Android中WebView和JavaScript进行简单通信
  7. 8.剑指Offer --- 英文版新增面试题
  8. 修改MySQL的配置文件
  9. iOS逆向(什么是越狱?)
  10. 仿么么街货源客模板源码 蚂蚁分类信息系统 带安装教程
  11. Matlab 绘制 - 点和向量:向量加减的方法和源码
  12. 如何申请微信号测试账号,进行微信开发
  13. TypeError: __init__() takes 1 positional argument but 2 were given
  14. PO:更改数组与对象的配置
  15. 交付管理——怎样管控项目成本
  16. 什么是jsf_什么是JSF? JavaServer Faces简介
  17. centos 释放swap_CentOS下SWAP分区建立及释放内存详解
  18. DBUS是什么 如何使用
  19. 局域网内抢网速_为什么4G的网速越来越慢?
  20. 栽培员工,让他强大到可以离开!

热门文章

  1. Avalondock 第三步 创建停靠面板组
  2. 计算机论文中期考核报告,硕士学位论文中期检查表范文_中期检查报告范文_中期考核 修改论文题目...
  3. 第三篇: DDcGAN-用于多分辨率图像融合的双判别器生成对抗网络
  4. linux解压win10iso,ISO文件的解压和WINISO問題
  5. 完美解决IE9浏览器出现的对象未定义问题
  6. Ubuntu系统下载(清华大学开源软件镜像站)(ubuntu-20.04.1-desktop-amd64.iso)
  7. app测试比相比web测试需要注意的点
  8. 无法正常启动,错误0xc0150002
  9. 我转行程序员的那一年(四)
  10. xcode 怎么调用midi开发录音_直播_个人工作室入门_1K-2k价位录音编曲声卡推荐