电商总结-日志监控系统的解决方案

监控系统主要用于服务器集群的资源和性能监控以及应用异常和性能监控，日志管理等多维度的性能监控分析。一个完善的监控系统和日志系统对于一个系统的重要性不必我多说，总而言之就一句话，只有实时了解各系统的状态，才能保证各系统的稳定。

　　如上图所示，监控平台监控的范围很广，服务器性能及资源，还有应用系统的监控。每个公司都有特定的平台统一监控的需求及解决方案，但是监控平台的任务和作用基本是一致的。

　　一，日志

　　日志是监视程序运行的一种重要的方式，主要有两个目的：1.bug的及时发现和定位，2.显示程序运行状态。正确详细的日志记录能够快速的定位问题。同样，通过查看日志，可以看出程序正在做什么，是不是按预期的设计在执行，所以记录下程序的运行状态是必要的。这里将日志分为两种：1.异常日志，2.运行日志。

　　我们主要是使用log4net，将各个系统的日志，持久化记录到数据库或者文件中，以方便后续的系统异常监控和性能分析。如何集成log4net，这里不再说明。

　　日志记录的几个原则：

　　　　1. 区分日志级别一定要区分清楚，哪些属于error，warning，info，等，

　　　　2. 记录错误的位置，如果是分层系统，一定要在某个层统一处理，例如，我们的mvc架构，都是在各个action中catch异常，并处理，业务层和数据库层这些地方的异常，都是catch到异常后，往上一层抛。

　　　　3. 日志信息清晰准确有意义，日志尽量详细点，以方便处理。应该记录相关系统，模块，时间，操作人，堆栈信息等。方便后续处理。

　　二，监控

　　监控系统是一个复杂的系统平台，目前有很多的开源产品和平台。不过我们平台小，监控任务和需求少，所以基本都是自己开发，主要有这五个方面：1.系统资源，2.服务器,3.服务，4.应用异常，5.应用性能。

　　具体的架构图如下：

　　1，系统资源监控

　　　　监控各种网络参数和各服务器相关资源（cpu,内存，磁盘读写，网络，访问请求等），保证服务器系统的安全运营；并提供异常通知机制以让系统管理员快速定位/解决存在的各种问题。目前比较流行的应该是zabbix。

　　2，服务器监控

　　　　服务器的监控，主要是监控各个服务器，网络节点，网关，等网络设备，的请求响应是否正常。

　　　　通过定时服务，定时去ping各个网络节点设备，以确认各网络设备是否正常，，如果哪个网络设备出现异常，则发出消息提醒。

　　3，服务监控

　　　　服务监控，指的是各个web服务，图片服务，搜索引擎服务，缓存服务等平台系统的各项服务是否正常运行，

　　　　可以通过定时服务，每隔一段时间，就去请求相关的服务，确保平台的各项服务正常运行。

　　4，应用异常监控

　　　　目前我们平台的所有系统的异常记录，都记录在数据库中。通过定时服务，统计分析一段时间之内的异常记录。如果发现有相关重要的模块的系统异常，比如支付，下单模块，频繁发生异常，则立即通知相关人员处理，确保服务正常运行。

　　5，应用性能监控

　　　　在api接口和各应用的相关位置进行拦截和记录下程序性能（sql性能，或是程序执行效率）。相关重要模块提供性能预警，提前发现问题。同时统计相关监控信息并显示给开发的人员，以方便后续的性能分析。

来源：http://blog.csdn.net/haihongazar/article/details/52535750

电商总结-日志监控系统的解决方案相关推荐

电商平台实时监控系统丨前端项目的准备
项目最终的效果如图所示: 最终效果涉及到6个图表, 5种图表类型,它们分别是折线图,柱状图,地图,散点图,饼图每个图表的数据都是从后端推送到前端来的, 不过在项目的初期,我们会先使用 ajax 由前 ...
深度解析大型分布式电商网站演变过程以及构架部署解决方案
前言: 本文是学习大型分布式网站架构的技术总结.对架构一个高性能,高可用,可伸缩,可扩展的分布式网站进行了概要性描述,并给出一个架构参考.一部分为读书笔记,一部分是个人经验总结.对大型分布式网站架构有 ...
电商实时交易风控系统
1.课程名称电商实时交易风控系统 2.课程目标 1.了解电子商务交易的风险点 2.了解电子商务交易中风险点的处理策略 3.利用Storm技术开发基于规则判定的风控系统 4.掌握企业中风控系统的一般架 ...
010_电商实时交易风控系统_第5天(行业知识、需求分析、架构设计、代码开发) ---没用...
1.课程名称电商实时交易风控系统 2.课程目标 1.了解电子商务交易的风险点 2.了解电子商务交易中风险点的处理策略 3.利用Storm技术开发基于规则判定的风控系统 4.掌握企业中风控系统的一般架 ...
电商中常见的高并发解决方案
目录多级缓存什么叫多级缓存多级缓存的实现思路 Redis 缓存同步 MySql 数据 Nginx 限流什么是限流常见的限流算法之漏桶算法 nginx 限流的方式控制速率控制并发量(连接数 ...
电商项目实战之分布式事务解决方案
电商项目实战之分布式事务解决方案本地事务事务隔离级别事务传播机制分布式事务 CAP理论选举与同步理论 BASE理论解决方案 2PC模式(XA事务) 柔性事务-TCC事务补偿型方案柔性事务 ...
ELK 搭建 TB 级海量日志监控系统，这个太强了！
欢迎关注方志朋的博客,回复"666"获面试宝典作者:非洲羚羊来源:cnblogs.com/dengbangpang/p/12961593.html 本文主要介绍怎么使用 ELK ...
深度学习核心技术精讲100篇（四十八）-TB级的日志监控系统很难？带你使用ELK轻松搭建日志监控系统
前言本文主要介绍怎么使用 ELK Stack 帮助我们打造一个支撑起日产 TB 级的日志监控系统.在企业级的微服务环境中,跑着成百上千个服务都算是比较小的规模了.在生产环境上,日志扮演着很重要的角色 ...
如何用ELK搭建TB级的日志监控系统？
点击上方"朱小厮的博客",选择"设为星标" 后台回复"加群",加入新技术来源:8rr.co/6UEz 本文主要介绍怎么使用 ELK Sta ...

电商总结-日志监控系统的解决方案

电商总结-日志监控系统的解决方案相关推荐

最新文章

热门文章