兄弟连Linux教程(李明,沈超) 第14章日志管理

正文
参考资料

正文

14.1 日志管理简介

1、日志服务

在CentOS 6.x中日志服务已经由rsyslogd取代了原先的syslogd服务。rsyslogd日志服务更加先进，功能更多。但是不论该服务的使用，还是日志文件的格式其实都是和syslogd服务相兼容的，所以学习起来基本和syslogd服务一致。

rsyslogd的新特点：

基于TCP网络协议传输日志信息；
更安全的网络传输方式；
有日志消息的及时分析框架；
后台数据库；
配置文件中可以写简单的逻辑判断；
与syslog配置文件相兼容。

确定服务启动

[root@localhost ~]# ps aux | grep rsyslogd
#查看服务是否启动

chkconfig --list | grep rsyslog
#查看服务是否自启动

2、常见日志的作用

日志文件    说             明
/var/log/cron    记录了系统定时任务相关的日志。
/var/log/cups/    记录打印信息的日志
/var/log/dmesg    记录了系统在开机时内核自检的信息。也可以使用dmesg命令直接查看内核自检信息。
/var/log/btmp    记录错误登录的日志。这个文件是二进制文件，不能直接vi查看，要使用lastb命令查看，如下：
                [root@localhost log]# lastb 
                root     tty1                          Tue Jun  4 22:38 - 22:38  (00:00)
                #有人在6月4日22:38使用root用户，在本地终端1登录错误
                    
/var/log/lastlog    记录系统中所有用户最后一次的登录时间的日志。这个文件也是二进制文件，不能直接vi，而要使用lastlog命令查看。
/var/log/mailog    记录邮件信息。
/var/log/message    记录系统重要信息的日志。这个日志文件中会记录Linux系统的绝大多数重要信息，如果系统出现问题时，首先要检查的就应该是这个日志文件。
/var/log/secure    记录验证和授权方面的信息，只要涉及账户和密码的程序都会记录。比如说系统的登录，ssh的登录，su切换用户，sudo授权，甚至添加用户和修改用户密码都会记录在这个日志文件中。
/var/log/wtmp    永久记录所有用户的登录、注销信息，同时记录系统的启动、重启、关机事件。同样这个文件也是一个二进制文件，不能直接vi，而需要使用last命令来查看。
/var/run/utmp    记录当前已经登录的用户的信息。这个文件会随着用户的登录和注销而不断变化，只记录当前登录用户的信息。同样这个文件不能直接vi，而要使用w，who，users等命令来查询。

除了系统默认的日志之外，采用RPM方式安装的系统服务也会默认把日志记录在/var/log/目录中（源码包安装的服务日志是在源码包指定目录中）。不过这些日志不是由rsyslogd服务来记录和管理的，而是各个服务使用自己的日志管理文档来记录自身日志。

日志文件    说  明
/var/log/httpd/    RPM包安装的apache服务的默认日志目录
/var/log/mail/    RPM包安装的邮件服务的额外日志目录
/var/log/samba/    RPM包安装的samba服务的日志目录
/var/log/sssd/    守护进程安全服务目录

14.2 rsyslogd日志服务

1、日志文件格式

基本日志格式包含以下四列：

事件产生的时间；
发生事件的服务器的主机名；
产生事件的服务名或程序名；
事件的具体信息。

2、/etc/rsyslog.conf配置文件

authpriv.*                          /var/log/secure
#服务名称[连接符号]日志等级        日志记录位置
#认证相关服务.所有日志等级        记录在/var/log/secure日志中

服务名称

服务名称    说明 
auth    安全和认证相关消息（不推荐使用authpriv替代）
authpriv    安全和认证相关消息（私有的）
cron    系统定时任务cront和at产生的日志
daemon    和各个守护进程相关的日志
ftp    ftp守护进程产生的日志
kern    内核产生的日志（不是用户进程产生的）
local0-local7    为本地使用预留的服务
lpr    打印产生的日志
mail    邮件收发信息
news    与新闻服务器相关的日志
syslog    有syslogd服务产生的日志信息（虽然服务名称已经改为rsyslogd，但是很多配置都还是沿用了syslogd的，这里并没有修改服务名）。
user    用户等级类别的日志信息
uucp    uucp子系统的日志信息，uucp是早期linux系统进行数据传递的协议，后来也常用在新闻组服务中。

连接符号

连接符号可以识别为：

“*”代表所有日志等级，比如：“authpriv.*”代表authpriv认证信息服务产生的日志，所有的日志等级都记录
“.”代表只要比后面的等级高的（包含该等级）日志都记录下来。比如：“cron.info”代表cron服务产生的日志，只要日志等级大于等于info级别，就记录
“.=”代表只记录所需等级的日志，其他等级的都不记录。比如：“*.=emerg”代表人和日志服务产生的日志，只要等级是emerg等级就记录。这种用法极少见，了解就好
“.!”代表不等于，也就是除了该等级的日志外，其他等级的日志都记录。

日志等级

等级名称    说明
debug    一般的调试信息说明
info    基本的通知信息
notice    普通信息，但是有一定的重要性
warning    警告信息，但是还不会影响到服务或系统的运行
err    错误信息，一般达到err等级的信息以及可以影响到服务或系统的运行了。
crit    临界状况信息，比err等级还要严重
alert    警告状态信息，比crit还要严重。必须立即采取行动
emerg    疼痛等级信息，系统已经无法使用了

日志记录位置

日志文件的绝对路径，如“/var/log/secure”
系统设备文件，如“/dev/lp0”
转发给远程主机，如“@192.168.0.210:514”
用户名，如“root”
忽略或丢弃日志，如“~”

14.3 日志轮替

1、日志文件的命名规则

如果配置文件中拥有“dateext”参数，那么日志会用日期来作为日志文件的后缀，例如“secure-20130605”。这样的话日志文件名不会重叠，所以也就不需要日志文件的改名，只需要保存指定的日志个数，删除多余的日志文件即可。

如果配置文件中没有“dateext”参数，那么日志文件就需要进行改名了。当第一次进行日志轮替时，当前的“secure”日志会自动改名为“secure.1”，然后新建“secure”日志，用来保存新的日志。当第二次进行日志轮替时，“secure.1”会自动改名为“secure.2”，当前的“secure”日志会自动改名为“secure.1”，然后也会新建“secure”日志，用来保存新的日志，以此类推。

2、logrotate配置文件

参数    参数说明
daily    日志的轮替周期是每天
weekly    日志的轮替周期是每周
monthly    日志的轮替周期是每月
rotate 数字    保留的日志文件的个数。0指没有备份
compress    日志轮替时，旧的日志进行压缩
create mode owner group    建立新日志，同时指定新日志的权限与所有者和所属组。如create 0600 root utmp
mail address    当日志轮替时，输出内容通过邮件发送到指定的邮件地址。如mail shenc@lamp.net
missingok    如果日志不存在，则忽略该日志的警告信息
notifempty     如果日志为空文件，则不进行日志轮替
minsize 大小    日志轮替的最小值。也就是日志一定要达到这个最小值才会轮替，否则就算时间达到也不轮替
size 大小    日志只有大于指定大小才进行日志轮替，而不是按照时间轮替。如size 100k
dateext    使用日期作为日志轮替文件的后缀。如secure-20130605

root@baiyang-PC:/home/baiyang/Videos# cat /etc/logrotate.conf 
# see "man logrotate" for details
# rotate log files weekly
weekly

# keep 4 weeks worth of backlogs
rotate 4

# create new (empty) log files after rotating old ones
create

# uncomment this if you want your log files compressed
#compress

# packages drop log rotation information into this directory
include /etc/logrotate.d

# no packages own wtmp, or btmp -- we'll rotate them here
/var/log/wtmp {
    missingok
    monthly
    create 0664 root utmp
    rotate 1
}

/var/log/btmp {
    missingok
    monthly
    create 0660 root utmp
    rotate 1
}

# system-specific logs may be configured here
size 1000M
/var/log/*.log {
    maxsize 100M
    hourly
    missingok
    rotate 8
    compress
    notifempty
    nocreate
}

3、把apache日志加入轮替

[root@localhost ~]# vi /etc/logrotate.conf 
/usr/local/apache2/logs/access_log {
    daily
    create
    rotate 30
}

4、logrotate命令

[root@localhost ~]# logrotate [选项] 配置文件名
选项：
    如果此命令没有选项，则会按照配置文件中的条件进行日志轮替
    -v：    显示日志轮替过程。加了-v选项，会显示日志的轮替的过程
    -f：    强制进行日志轮替。不管日志轮替的条件是否已经符合，强制配置文件中所有的日志进行轮替

centos7.9

[root@localhost ~]# cat /etc/redhat-release
CentOS Linux release 7.9.2009 (Core)
[root@localhost ~]#
[root@localhost ~]# ps aux | grep log
root       423  0.0  0.0      0     0 ?        S<   08:54   0:00 [xfs-log/dm-0]
root       605  0.0  0.0      0     0 ?        S<   08:54   0:00 [xfs-log/sda1]
root       671  0.0  0.0  26384  1740 ?        Ss   08:55   0:00 /usr/lib/systemd/systemd-logind
root       973  0.0  0.0 216400  4228 ?        Ssl  08:55   0:03 /usr/sbin/rsyslogd -n
root      1641  1.4  0.6 1057960 36104 ?       Ssl  08:55   1:37 /usr/bin/dockerd-current --add-runtime docker-runc=/usr/libexec/docker/docker-runc-current --default-runtime=docker-runc --exec-opt native.cgroupdriver=systemd --userland-proxy-path=/usr/libexec/docker/docker-proxy-current --init-path=/usr/libexec/docker/docker-init-current --seccomp-profile=/etc/docker/seccomp.json --selinux-enabled --log-driver=journald --signature-verification=false --storage-driver overlay2
root      3039  0.0  0.0 112828   988 pts/0    S+   10:47   0:00 grep --color=auto log
[root@localhost ~]#
[root@localhost ~]# chkconfig --list

注：该输出结果只显示 SysV 服务，并不包含
原生 systemd 服务。SysV 配置数据
可能被原生 systemd 配置覆盖。

      要列出 systemd 服务，请执行 'systemctl list-unit-files'。
      查看在具体 target 启用的服务请执行
      'systemctl list-dependencies [target]'。

netconsole      0:关    1:关    2:关    3:关    4:关    5:关    6:关
network         0:关    1:关    2:开    3:开    4:开    5:开    6:关
[root@localhost ~]#
[root@localhost ~]# ls -al /etc | grep log
-rw-r--r--.  1 root root     1103 4月   1 2020 csh.login
lrwxrwxrwx.  1 root root       56 2月  16 20:15 favicon.png -> /usr/share/icons/hicolor/16x16/apps/fedora-logo-icon.png
-rw-r--r--.  1 root root     2027 8月   6 2019 login.defs
-rw-r--r--.  1 root root      662 7月  31 2013 logrotate.conf
drwxr-xr-x.  2 root root      168 2月  17 19:57 logrotate.d
-rw-r--r--.  1 root root     3232 10月 13 2020 rsyslog.conf
drwxr-xr-x.  2 root root       25 10月 14 2020 rsyslog.d
[root@localhost ~]#
[root@localhost ~]# cat /etc/rsyslog.conf
# rsyslog configuration file

# For more information see /usr/share/doc/rsyslog-*/rsyslog_conf.html
# If you experience problems, see http://www.rsyslog.com/doc/troubleshoot.html

#### MODULES ####

# The imjournal module bellow is now used as a message source instead of imuxsock.
$ModLoad imuxsock # provides support for local system logging (e.g. via logger command)
$ModLoad imjournal # provides access to the systemd journal
#$ModLoad imklog # reads kernel messages (the same are read from journald)
#$ModLoad immark  # provides --MARK-- message capability

# Provides UDP syslog reception
#$ModLoad imudp
#$UDPServerRun 514

# Provides TCP syslog reception
#$ModLoad imtcp
#$InputTCPServerRun 514


#### GLOBAL DIRECTIVES ####

# Where to place auxiliary files
$WorkDirectory /var/lib/rsyslog

# Use default timestamp format
$ActionFileDefaultTemplate RSYSLOG_TraditionalFileFormat

# File syncing capability is disabled by default. This feature is usually not required,
# not useful and an extreme performance hit
#$ActionFileEnableSync on

# Include all config files in /etc/rsyslog.d/
$IncludeConfig /etc/rsyslog.d/*.conf

# Turn off message reception via local log socket;
# local messages are retrieved through imjournal now.
$OmitLocalLogging on

# File to store the position in the journal
$IMJournalStateFile imjournal.state


#### RULES ####

# Log all kernel messages to the console.
# Logging much else clutters up the screen.
#kern.*                                                 /dev/console

# Log anything (except mail) of level info or higher.
# Don't log private authentication messages!
*.info;mail.none;authpriv.none;cron.none                /var/log/messages

# The authpriv file has restricted access.
authpriv.*                                              /var/log/secure

# Log all the mail messages in one place.
mail.*                                                  -/var/log/maillog


# Log cron stuff
cron.*                                                  /var/log/cron

# Everybody gets emergency messages
*.emerg                                                 :omusrmsg:*

# Save news errors of level crit and higher in a special file.
uucp,news.crit                                          /var/log/spooler

# Save boot messages also to boot.log
local7.*                                                /var/log/boot.log


# ### begin forwarding rule ###
# The statement between the begin ... end define a SINGLE forwarding
# rule. They belong together, do NOT split them. If you create multiple
# forwarding rules, duplicate the whole block!
# Remote Logging (we use TCP for reliable delivery)
#
# An on-disk queue is created for this action. If the remote host is
# down, messages are spooled to disk and sent when it is up again.
#$ActionQueueFileName fwdRule1 # unique name prefix for spool files
#$ActionQueueMaxDiskSpace 1g   # 1gb space limit (use as much as possible)
#$ActionQueueSaveOnShutdown on # save messages to disk on shutdown
#$ActionQueueType LinkedList   # run asynchronously
#$ActionResumeRetryCount -1    # infinite retries if host is down
# remote host is: name/ip:port, e.g. 192.168.0.1:514, port optional
#*.* @@remote-host:514
# ### end of the forwarding rule ###
[root@localhost ~]#
[root@localhost ~]#
[root@localhost ~]#
[root@localhost ~]# cat /etc/logrotate.
cat: /etc/logrotate.: 没有那个文件或目录
[root@localhost ~]# cat /etc/logrotate.conf
# see "man logrotate" for details
# rotate log files weekly
weekly

# keep 4 weeks worth of backlogs
rotate 4

# create new (empty) log files after rotating old ones
create

# use date as a suffix of the rotated file
dateext

# uncomment this if you want your log files compressed
#compress

# RPM packages drop log rotation information into this directory
include /etc/logrotate.d

# no packages own wtmp and btmp -- we'll rotate them here
/var/log/wtmp {
    monthly
    create 0664 root utmp
        minsize 1M
    rotate 1
}

/var/log/btmp {
    missingok
    monthly
    create 0600 root utmp
    rotate 1
}

# system-specific logs may be also be configured here.
[root@localhost ~]#
[root@localhost ~]#

正文

14.1 日志管理简介

14.2 rsyslogd日志服务

14.3 日志轮替

centos7.9

参考资料