如何查看linux系统下的各种日志文件 linux 系统日志的分析大全

日志分类:

1. 连接时间的日志

连接时间日志一般由/var/log/wtmp和/var/run/utmp这两个文件记录，不过这

　　两个文件无法直接cat查看，并且该文件由系统自动更新，可以通过如下：

　　w/who/finger/id/last/lastlog/ac 进行查看

　　[root@xhot ~]# who

　　root tty1 2010-10-06 22:56

　　root pts/0 2010-10-06 22:26 (218.192.87.4)

　　root pts/1 2010-10-06 23:41 (218.192.87.4)

　　root pts/3 2010-10-06 23:18 (218.192.87.4)

　　[root@xhot ~]# w

　　01:01:02 up 2:36, 4 users, load average: 0.15, 0.03, 0.01

　　USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT

　　root tty1 - 22:56 1:20m 0.16s 0.16s -bash

　　root pts/0 218.192.87.4 22:26 2:05m 0.18s 0.18s -bash

　　root pts/1 218.192.87.4 23:41 0.00s 0.41s 0.00s w

　　root pts/3 218.192.87.4 23:18 1:38m 0.03s 0.03s -bash

　　[root@xhot ~]# ac -p //查看每个用户的连接时间

　　u51 1.23

　　u55 0.04

　　root 95.21 //可以看到root连接时间最长吧

　　xhot 0.06

　　user1 3.93

　　total 100.48

　　[root@xhot ~]# ac -a //查看所有用户的连接时间

　　total 100.49

　　[root@xhot ~]# ac -d //查看用户每天的连接时间

　　Sep 24 total 0.14

　　Sep 25 total 14.60

　　Sep 26 total 13.71

　　Sep 27 total 21.47

　　Sep 28 total 11.74

　　Sep 29 total 6.60

　　Sep 30 total 8.81

　　Oct 1 total 9.04

　　Oct 2 total 0.47 //可以看到我国庆3、4、5号出去玩了

　　Oct 6 total 8.62

　　Today total 5.29

　　其他几个命令不做具体介绍了

2. 进程监控日志

　　进程统计监控日志在监控用户的操作指令是非常有效的。当服务器最近发现经常

　　无故关机或者无故被人删除文件等现象时，可以通过使用进程统计日志查看：

　　[root@xhot ~]# accton /var/account/pacct //开启进程统计日志监控

　　[root@xhot ~]# lastcomm //查看进程统计日志情况

　　accton S root pts/1 0.00 secs Thu Oct 7 01:20

　　accton root pts/1 0.00 secs Thu Oct 7 01:20

　　ac root pts/1 0.00 secs Thu Oct 7 01:14

　　free root pts/1 0.00 secs Thu Oct 7 01:10

　　lastcomm root pts/1 0.00 secs Thu Oct 7 01:09

　　bash F root pts/1 0.00 secs Thu Oct 7 01:09

　　lastcomm root pts/1 0.00 secs Thu Oct 7 01:09

　　ifconfig root pts/1 0.00 secs Thu Oct 7 01:09

　　lastcomm root pts/1 0.00 secs Thu Oct 7 01:09

　　accton S root pts/1 0.00 secs Thu Oct 7 01:09

　　[root@xhot ~]# accton //关闭进程统计日志监控

3. 系统和服务日志

　　系统日志服务是由一个名为syslog的服务管理的，如一下日志文件都是由syslog日志服务驱动的：

　　/var/log/lastlog ：记录最后一次用户成功登陆的时间、登陆IP等信息

　　/var/log/messages ：记录Linux操作系统常见的系统和服务错误信息

　　/var/log/secure ：Linux系统安全日志，记录用户和工作组变坏情况、用户登陆认证情况

　　/var/log/btmp ：记录Linux登陆失败的用户、时间以及远程IP地址

　　/var/log/cron ：记录crond计划任务服务执行情况

　　…...

　　[root@xhot ~]# cat /var/log/lastlog

　　Lpts/0218.192.87.4

　　Lpts/1218.192.87.4

　　Lpts/0218.192.87.46

　　Lpts/0218.192.87.4

　　…...

Linux日志服务介绍

１. 在Linux系统，大部分日志都是由syslog日志服务驱动和管理的
syslog服务由两个重要的配置文件控制管理，分别是/etc/syslog.conf主配置文件和/etc/sysconfig/syslog辅助

　　配置文件， /etc/init.d/syslog是启动脚本，这里主讲主配置文件/etc/syslog.conf：

　　/etc/syslog.conf 语句结构：

　　[root@xhot ~]# grep -v "#" /etc/syslog.conf //列出非#打头的每一行

　　*.info;mail.none;authpriv.none;cron.none /var/log/messages

　　authpriv.* /var/log/secure

　　mail.* -/var/log/maillog

　　cron.* /var/log/cron

　　*.emerg *

　　uucp,news.crit /var/log/spooler

　　local7.* /var/log/boot.log

　　选择域(消息类型.错误级别) 动作域

２. 消息类型：auth,authpriv,security;cron,daemon,kern,lpr,mail, mark,news,syslog,user,uucp,local0~local7.

　　错误级别：(8级)debug,info,notice,warning|warn;err|error;crit,alert,emerg|panic

　　动作域：file,user,console,@remote_ip

　　举如上的/etc/syslog.conf文件三个例子：

　　*.info;mail.none;authpriv.none;cron.none /var/log/messages

　　表示info级别的任何消息都发送到/var/log/messages日志文件，但邮件系统、验证系统

　　和计划任务的错误级别信息就除外，不发送（none表示禁止）

　　cron.* /var/log/cron 表示所有级别的cron信息发到/var/log/cron文件

　　*.emerg * 表示emerg错误级别（危险状态）的所有消息类型发给所有用户

Linux日志服务器配置

　　此服务器的配置非常简单，只是修改一个文件的一个地方，然后重启服务即可：

　　[root@xhot ~]# grep -v "#" /etc/sysconfig/syslog

　　SYSLOGD_OPTIONS="-m 0 -r" //只要在这里添加“-r”就行咯

　　KLOGD_OPTIONS="-x"

　　SYSLOG_UMASK=077

　　[root@xhot ~]# service syslog restart

　　关闭内核日志记录器： [确定]

　　关闭系统日志记录器： [确定]

　　启动系统日志记录器： [确定]

　　启动内核日志记录器： [确定]

　　对于发送消息到服务器的OS，只要在写/etc/syslog.conf主配置文件的时候，作用域

　　为@server-ip就行了，比如针对218.192.87.24这台日志服务器，把一台ubuntu系统的所有

　　info级别的auth信息发给日志服务器，那么对于ubuntu系统的/etc/syslog.conf文件最后一

　　行添加 auth.info @218.192.87.24 就OK了

日志转储服务

　　系统工作到了一定时间后，日志文件的内容随着时间和访问量的增加而越来越多，

　　日志文件也越来越大。而且当日志文件超过系统控制范围时候，还会对系统性能

　　造成影响。转储方式可以设为每年转储、每月转储、每周转储、达到一定大小转储。

　　在Linux系统，经常使用“logrotate”工具进行日志转储，结合cron计划任务，可以轻松

　　实现日志文件的转储。转储方式的设置由“/etc/logrotate.conf”配置文件控制：

　　[root@xhot ~]# cat /etc/logrotate.conf

　　# see "man logrotate" for details //可以查看帮助文档

　　# rotate log files weekly

　　weekly //设置每周转储

　　# keep 4 weeks worth of backlogs

　　rotate 4 //最多转储4次

　　# create new (empty) log files after rotating old ones

　　create //当转储后文件不存储时创建它

　　# uncomment this if you want your log files compressed

　　#compress //以压缩方式转储

　　# RPM packages drop log rotation information into this directory

　　include /etc/logrotate.d //其他日志文件的转储方式，包含在该目录下

　　# no packages own wtmp -- we'll rotate them here

　　/var/log/wtmp { //设置/var/log/wtmp日志文件的转储参数

　　monthly //每月转储

　　create 0664 root utmp //转储后文件不存在时创建它，文件所有者为root，

　　所属组为utmp，对应的权限为0664

　　rotate 1 //转储一次

　　}

　　# system-specific logs may be also be configured here.

举两个例子：
为/var/log/news/目录下的所有文件设置转储参数，每周转储，转储2次，转储

时将老的日志文件放到/var/log/news/old目录下，若日志文件不存在，则跳过。完成后重启

news新闻组服务，转储时不压缩。那么可以在/etc/logrotate.conf文件的最后添加如下：

　　/var/log/news/*{

　　monthly

　　rotate 2

　　olddir /var/log/news/old

　　missingok

　　postrotate

　　kill -HUP `cat /var/run/inn.pid`

　　endscript

　　nocompress

　　}

另一个例子：为/var/log/httpd/access.log和/var/log/httpd/error.log日志设置转储参数。转储

　　5次，转储时发送邮件给root@localhost用户，当日志文件达到100KB时才转储，转储后重启

　　httpd服务，那么可以直接在/etc/logrotate.conf文件的最后添加如下：

　　/var/log/httpd/access.log /var/log/http/error.log{

　　rotate 5

　　mail root@localhost

　　size=100k

　　sharedscripts

　　/sbin/killall -HUP httpd

　　endscript

　　}

自定义日志转储（/etc/logrotate.d/*）

　　通过下面一个例子将所有类型错误级别为info的日志转储到/var/log/test.log日志文件中，并设置

　　/var/log/test.log达到50KB后进行转储，转储10次，转储时压缩，转储后重启syslog服务：

　　1、修改/etc/syslog.conf文件使得如下：

　　[root@xhot ~]# tail -1 /etc/syslog.conf //查看该文件的最后一行

　　*.info /var/log/test.log

　　2、重启syslog服务：

[root@xhot ~]# /sbin/service syslog restart

　　关闭内核日志记录器： [确定]

　　关闭系统日志记录器： [确定]

　　启动系统日志记录器： [确定]

　　启动内核日志记录器： [确定]

　　3、创建/etc/logrotate.d/test.log日志转储参数配置文件，添加如下：

[root@xhot ~]# vim /etc/logrotate.d/test.log

　　[root@xhot ~]# cat /etc/logrotate.d/test.log

　　/var/log/test.log{

　　rotate 10

　　size = 50k

　　compress

　　postrotate

　　killall -HUP syslog

　　endscript

　　}

　　4、查看文件/etc/cron.daily/logrotate确保如下：

　　[root@xhot ~]# cat /etc/cron.daily/logrotate

　　#!/bin/sh

　　/usr/sbin/logrotate /etc/logrotate.conf

　　EXITVALUE=$?

　　if [ $EXITVALUE != 0 ]; then

　　/usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"

　　exit 0

　　5、查看转储后的文件

[root@xhot log]# pwd

　　/var/log

　　[root@xhot log]# ls test.log*

　　…… //结果等要转储的时候会发现压缩文件和原本的test.log文件

syslog是一个被UNIX和Linux广泛使用的日志系统，Linux系统中大部分的日志文件都是通过它进行管理的。本节将对syslog的功能及配置、日志文件的查看和管理，以及syslog中默认配置的日志文件进行介绍。

12.2.1 syslog简介

syslog是一个历史悠久的日志系统，几乎所有的UNIX和Linux操作系统都是采用syslog进行系统日志的管理和配置。Linux系统内核和许多程序会产生各种错误信息、警告信息和其他的提示信息。这些信息对管理员了解系统的运行状态是非常有用的，所以应该把它们写到日志文件中去。而执行这个过程的程序就是syslog。syslog可以根据信息的来源以及信息的重要程度将信息保存到不同的日志文件中，例如，为了方便查阅，可以把内核信息与其他信息分开，单独保存到一个独立的日志文件中。在默认的syslog配置下，日志文件通常都保存在“/var/log”目录下。syslog的守护进程为syslogd，系统启动时，默认会自动运行syslogd守护进程。

如果要手工启动，可以使用如下命令：

/sbin/syslogd

在修改syslog配置后，需要重新启动syslogd守护进程才能使新的配置生效。其命令如下所示。

# killall -HUP syslogd

Red Hat Enterprise Linux 5.2安装后默认就已经在syslog中定义了一些日志文件，这些日志的位置以及它们的说明如表12.2所示。

表12.2 默认配置syslog日志

日志文件	说明
/var/log/message	系统启动后的信息和错误日志，是Red Hat Linux中最常用的日志之一
/var/log/secure	与安全相关的日志信息
/var/log/maillog	与邮件相关的日志信息
/var/log/cron	与定时任务相关的日志信息
/var/log/spooler	与UUCP和news设备相关的日志信息
/var/log/boot.log	守护进程启动和停止相关的日志消息

这是另外一篇文章。

Linux系统拥有非常灵活和强大的日志功能，可以保存几乎所有的操作记录，并可以从中检索出我们需要的信息。

大部分Linux发行版默认的日志守护进程为 syslog，位于 /etc/syslog 或 /etc/syslogd 或/etc/rsyslog.d，默认配置文件为 /etc/syslog.conf 或 rsyslog.conf，任何希望生成日志的程序都可以向 syslog 发送信息。

Linux系统内核和许多程序会产生各种错误信息、警告信息和其他的提示信息，这些信息对管理员了解系统的运行状态是非常有用的，所以应该把它们写到日志文件中去。

完成这个过程的程序就是syslog。syslog可以根据日志的类别和优先级将日志保存到不同的文件中。

例如，为了方便查阅，可以把内核信息与其他信息分开，单独保存到一个独立的日志文件中。默认配置下，日志文件通常都保存在“/var/log”目录下。

日志类型

下面是常见的日志类型，但并不是所有的Linux发行版都包含这些类型：

类型	说明
auth	用户认证时产生的日志，如login命令、su命令。
authpriv	与 auth 类似，但是只能被特定用户查看。
console	针对系统控制台的消息。
cron	系统定期执行计划任务时产生的日志。
daemon	某些守护进程产生的日志。
ftp	FTP服务。
kern	系统内核消息。
local0.local7	由自定义程序使用。
lpr	与打印机活动有关。
mail	邮件日志。
mark	产生时间戳。系统每隔一段时间向日志文件中输出当前时间，每行的格式类似于 May 26 11:17:09 rs2 -- MARK --，可以由此推断系统发生故障的大概时间。
news	网络新闻传输协议(nntp)产生的消息。
ntp	网络时间协议(ntp)产生的消息。
user	用户进程。
uucp	UUCP子系统。

日志优先级

常见的日志优先级请见下标：

优先级	说明
emerg	紧急情况，系统不可用（例如系统崩溃），一般会通知所有用户。
alert	需要立即修复，例如系统数据库损坏。
crit	危险情况，例如硬盘错误，可能会阻碍程序的部分功能。
err	一般错误消息。
warning	警告。
notice	不是错误，但是可能需要处理。
info	通用性消息，一般用来提供有用信息。
debug	调试程序产生的信息。
none	没有优先级，不记录任何日志消息。

常用日志文件

系统日志是由一个名为syslog的服务管理的，如以下日志文件都是由syslog日志服务驱动的：

/var/log/boot.log：录了系统在引导过程中发生的事件，就是Linux系统开机自检过程显示的信息

/var/log/lastlog ：记录最后一次用户成功登陆的时间、登陆IP等信息

/var/log/messages ：记录Linux操作系统常见的系统和服务错误信息

/var/log/secure ：Linux系统安全日志，记录用户和工作组变坏情况、用户登陆认证情况

/var/log/btmp ：记录Linux登陆失败的用户、时间以及远程IP地址

/var/log/syslog：只记录警告信息，常常是系统出问题的信息，使用lastlog查看

/var/log/wtmp：该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件，使用last命令查看

/var/run/utmp：该日志文件记录有关当前登录的每个用户的信息。如 who、w、users、finger等就需要访问这个文件

/var/log/syslog 或 /var/log/messages 存储所有的全局系统活动数据，包括开机信息。基于 Debian 的系统如 Ubuntu 在 /var/log/syslog 中存储它们，而基于 RedHat 的系统如 RHEL 或 CentOS 则在 /var/log/messages 中存储它们。
/var/log/auth.log 或 /var/log/secure 存储来自可插拔认证模块(PAM)的日志，包括成功的登录，失败的登录尝试和认证方式。Ubuntu 和 Debian 在 /var/log/auth.log 中存储认证信息，而 RedHat 和 CentOS 则在 /var/log/secure 中存储该信息。

日志文件详细介绍：

/var/log/boot.log

该文件记录了系统在引导过程中发生的事件，就是Linux系统开机自检过程显示的信息，如图1所示：

/var/log/syslog

默认Centos，Fedora不生成该日志文件，但可以配置/etc/syslog.conf让系统生成该日志文件。

它和/etc/log/messages日志文件不同，它只记录警告信息，常常是系统出问题的信息，所以更应该关注该文件。

要让系统生成该日志文件，在/etc/syslog.conf文件中加上：*.warning /var/log/syslog 该日志文件能记录当用户登录时login记录下的错误口令、Sendmail的问题、su命令执行失败等信息。

该日志文件记录最近成功登录的事件和最后一次不成功的登录事件，由login生成。在每次用户登录时被查询，该文件是二进制文件，需要使用lastlog命令查看，根据UID排序显示登录名、端口号和上次登录时间。如果某用户从来没有登录过，就显示为"**Never logged in**"。该命令只能以root权限执行。简单地输入lastlog命令后就会看到类似图4的信息：

[root@TestStation etc]# lastlog

Username Port From Latest

root pts/0 110.87.109.232 Wed Nov 2 10:34:20 +0800 2016

bin **Never logged in**

daemon **Never logged in**

adm **Never logged in**

lp **Never logged in**

sync **Never logged in**

shutdown **Never logged in**

halt **Never logged in**

mail **Never logged in**

uucp **Never logged in**

operator **Never logged in**

games **Never logged in**

gopher **Never logged in**

ftp **Never logged in**

nobody **Never logged in**

vcsa **Never logged in**

saslauth **Never logged in**

postfix **Never logged in**

sshd **Never logged in**

ntp **Never logged in**

suda pts/2 222.79.79.120 Tue Oct 25 16:00:01 +0800 2016

/var/log/wtmp

该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件。因此随着系统正常运行时间的增加，该文件的大小也会越来越大，增加的速度取决于系统用户登录的次数。该日志文件可以用来查看用户的登录记录，last命令就通过访问这个文件获得这些信息，并以反序从后向前显示用户的登录记录，last也能根据用户、终端tty或时间显示相应的记录。

/var/run/utmp

该日志文件记录有关当前登录的每个用户的信息。因此这个文件会随着用户登录和注销系统而不断变化，它只保留当时联机的用户记录，不会为用户保留永久的记录。系统中需要查询当前用户状态的程序，如 who、w、users、finger等就需要访问这个文件。该日志文件并不能包括所有精确的信息，因为某些突发错误会终止用户登录会话，而系统没有及时更新 utmp记录，因此该日志文件的记录不是百分之百值得信赖的。

以上提及的3个文件(/var/log/wtmp、/var/run/utmp、/var/log/lastlog)是日志子系统的关键文件，都记录了用户登录的情况。这些文件的所有记录都包含了时间戳。这些文件是按二进制保存的，故不能用less、cat之类的命令直接查看这些文件，而是需要使用相关命令通过这些文件而查看。其中，utmp和wtmp文件的数据结构是一样的，而lastlog文件则使用另外的数据结构，关于它们的具体的数据结构可以使用man命令查询。

每次有一个用户登录时，login程序在文件lastlog中查看用户的UID。如果存在，则把用户上次登录、注销时间和主机名写到标准输出中，然后login程序在lastlog中记录新的登录时间，打开utmp文件并插入用户的utmp记录。该记录一直用到用户登录退出时删除。utmp文件被各种命令使用，包括who、w、users和finger。

下一步，login程序打开文件wtmp附加用户的utmp记录。当用户登录退出时，具有更新时间戳的同一utmp记录附加到文件中。wtmp文件被程序last使用。