rsyslog日志服务

一、知识整理:

1、日志服务rsyslogd新特点:

    多线程;

    基于SSL/TLS/UDP/TCP/RELP网络协议传输日志信息;

    强大的过滤器,实现过滤日志信息中任何部分的内容;

    自定义的输出格式;

    日志消息的及时分析框架

    存储日志信息与MySQLPGSQLOracleRDBMS

    配置文件中可以写简单的逻辑判断

    syslog配置文件相兼容

2、常见日志文件及作用

    /var/log/cron 记录了系统定时任务相关的日志;

    /var/log/cups 记录打印信息的日志;

    /var/log/dmesg 记录了系统在开机时内核自检的信息,也可以使用dmesg命令直接查看内核自检信息。

    /var/log/btmp 记录错误登录的日志,这个文件是二进制文件,不能直接vi查看,而要使用lastb命令查看;

    /var/log/lastlog 记录系统中所有用户最后一次的登录时间的日志。这个文件也是二进制文件,不能直接vi,而要使用lastlog命令查看。

    /var/log/mailog 记录邮件信息;

    /var/log/message 记录系统重要信息的日志,记录Linux系统的绝大多数重要信息,如果系统出现问题,首先要检查的就是应该是这个日志文件;

    /var/log/secure 记录验证和授权方面的信息,只要涉及账户和密码的程序都会记录。比如说系统的登录,ssh的登录,su切换用户,sudo授权,甚至添加用户和修改用户密码;

    /var/log/wtmp 永久记录所有用户的登录、注销信息,同时记录系统的启动、重启、关机事件。同样这个文件也是一个二进制文件不能直接vi而需要使用last命令来查看;

    /var/run/utmp 记录当前已经登录的用户的信息。这个文件会随着用户的登录和注销而不断变化,只记录当前登录用户的信息,同样这个文件不能直接vi,要使用wwhousers等命令;

    除了系统默认的日志外,rpm包安装的系统服务也默认把日志记录在/var/log/下(源码包在指定目录下)。不过这些日志不是系统记录和管理的,而是各个服务使用自己的日志管理文档来记录。

3、基本格式:日志基本格式

日志产生时间;发生事件的服务器主机名;发生事件的服务名或程序名;具体信息。

日志配置文件/etc/rsyslog.conf/etc/rsyslog.d/* ,配置文件格式简介:

服务名称[连接符号]日志等级      日志记录位置

(1)服务名称(facility):auth 安全和认证相关信息(不推荐使用authpriv替代)

    authpriv 安全和认证信息(私有的)

    cron 系统定时任务crontat产生的日志

    daemon 和各个守护进程相关的日志

    ftp    ftp守护进程产生的日志

    kern 内核产生的日志(不是用户进程产生的)

    local0-7 为本地使用预留的服务

    lpr   打印产生的日志

    mail     邮件日志信息

    syslog syslogd服务产生的日志信息,虽然服务名称改为rsyslogd,但是很多配置都还是沿用了syslogd的,这里并没有修改服务名

    user 用户等级类别的日志信息

    uucp uucp子系统的日志信息,uucp是早期Linux系统进行数据传递的协议,后来也常用在新闻组服务中

(2)连接符:. 只要比指定等级高的都记录下来

    .= 只记录等于指定等级的日志

    .! 代表不等于指定等级的日志都记录

(3)日志等级(priority):debug  一般的调试信息说明

    info 基本的通知信息

    notice  普通信息,但是有一定的重要性

    warning 警告信息,但是还不会影响到服务或系统的运行

    err 错误信息,已经可以影响到服务或系统的运行了

    crit 临界状况信息

    alert 警告状态信息,必须采取行动

    emerg 疼痛等级信息,系统已经无法使用

(4)可使用的日志记录位置

    /var/log/

    系统设备文件如/dev/lp0

    转发给远程主机,如@192.168.0.1.210:514

    用户名,如root

    模块: 如:ommysql:

4、日志轮替

日志文件的命名规则:

如果配置文件中拥有dateext”参数,那么日志会用日期来作为日志文件的后缀,例如secure-20150202.这样的话日志文件名不会重叠,所有也就不需要日志文件的改名,只需要保存指定的日志个数,删除多余的日志文件即可。

日志轮替(logrotate)配置文件/etc/logrotate.conf

daily 日志轮替周期是每天

weekly 每周

monthly 每月

rotate #   保留日志的文件的个数,0指没有备份

compress  日志轮替时,旧的日志进行压缩

creat  MODE  OWNER  GROUP

 建立新日志,同时指定新日志的权限与所有者和所属组;如creat 0600 root utmp

mail address 当日志轮替时,输出内容通过邮件发送到指定的邮件地址

missingok 如果日志不存在,则忽略该日志的警告信息

notifempty 如果日志为空文件,则不进行日志轮替

minsize 大小  日志轮替的最小值,日志达到最小值才会轮替

size 大小

dateext 使用日期作为日志轮替文件的后缀 如secure-20155555

注意:rpm包安装的程序默认轮替,源码包安装的需要自己修改配置或添加配置、指定日志目录等:

    vim /etc/logrotate.conf 打开后添加

    /usr/local/apache2/logs/access_logerror_log或其他日志) {

    daily

    create

    rotate 30

    }  (也可以在定义虚拟主机时定义)

日志由/sbin/init负责记录。

 

二、命令详解:

1logrotate命令 [] 配置文件名

如果此命令没有选项,则会按照配置文件中的条件进行日志轮替

-v 显示日志轮替过程

-f 强制进行日志轮替

2logger命令:

logger -a shell command interface to the syslog(3) system log module

logger [ options] [message]

logger -p local2.notice  "how are you"

 

三、课后练习:

LogAnalyzer 是一款syslog日志和其他网络事件数据的Web前端。它提供了对日志的简单浏览、搜索、基本分析和一些图表报告的功能。数据可以从数据库或一般的 syslog文本文件中获取,所以LogAnalyzer不需要改变现有的记录架构。基于当前的日志数据,它可以处理syslog日志消 息,Windows事件日志记录,支持故障排除,使用户能够快速查找日志数据中看出问题的解决方案。

LogAnalyzer 获取客户端日志会有两种保存模式,一种是直接读取客户端/var/log/目录下的日志并保存到服务端该目录下,一种是读取后保存到日志服务器数据库中,推荐使用后者。LogAnalyzer 采用php开发,所以日志服务器需要php的运行环境,本文采用LAMP。

步骤如下:

1)准备mysql,更改mysql配置文件my.cnf,添加如下:

    skip_name_resolve=ON

    innodb_file_per_table=1

(2)安装rsyslog连接至mysql server的驱动模块;

[root@localhost ~]# yum install rsyslog-mysql

3)在mysql-server准备rsyslog专用的用户账号,授权:

MariaDB [(none)]> GRANT ALL ON Syslog.* TO 'syslog'@'localhost' IDENTIFIED BY 'magedu';
Query OK, 0 rows affected (0.01 sec)
MariaDB [(none)]> GRANT ALL ON Syslog.* TO 'syslog'@'127.0.0.1' IDENTIFIED BY 'magedu';
MariaDB [(none)]> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)

生成所需要的数据库和表;使用重定向读入模块的命令:

[root@localhost ~]# mysql < /usr/share/doc/rsyslog-7.4.7/mysql-createDB.sql

(4)启用模块:

[root@localhost ~]# vim /etc/rsyslog.conf

MODULES一栏中添加:

    $ModLoad ommysql

    更改*.*日志生成的位置:添加

    *.*    :ommysql:127.0.0.1,Syslog,syslog,magedu

5)重启rsyslog服务

6)检测:启动mysql

[root@localhost ~]# logger -p local3.notice "how are youab"
[root@localhost ~]# logger -p local2.notice "how are youa"
MariaDB [Syslog]> SELECT * FROM SystemEvents\G

*************************** 11. row ***************************

                ID: 11

        CustomerID: NULL

        ReceivedAt: 2016-10-18 17:15:06

DeviceReportedTime: 2016-10-18 17:15:06

          Facility: 18

          Priority: 5

          FromHost: localhost

           Message: how are youa

        NTSeverity: NULL

        Importance: NULL

       EventSource: NULL

         EventUser: NULL

     EventCategory: NULL

           EventID: NULL

   EventBinaryData: NULL

      MaxAvailable: NULL

         CurrUsage: NULL

          MinUsage: NULL

          MaxUsage: NULL

        InfoUnitID: 1

         SysLogTag: root:

      EventLogType: NULL

   GenericFileName: NULL

          SystemID: NULL

11 rows in set (0.00 sec)

7)配置loganalyzer

    首先准备amp环境;安装httpdphp-gd(支持画图形)phpphp-server

    然后安装loganalyzer:

    cp -a src /html/

    ln -sv

    touch config.php

    chmod 666 config.php

    使用浏览器进行配置

    Table type monitorware

    chmod 644(安装完成后)

以上步骤也可以将原目录contrib中的两个脚本分别在安装前后执行。

安装步骤如下:

blob.png

此处注意:安装过程中出现了这个报错,找了各种日志也没发现原因,最后发现是需要关闭selinux。

blob.png

blob.png

blob.png

blob.png


blob.png

安装完成。

原创文章,作者:SilencePavilion,如若转载,请注明出处:http://www.178linux.com/53730

(0)
SilencePavilionSilencePavilion
上一篇 2016-10-24
下一篇 2016-10-24

相关推荐

  • CentOS 6上的防火墙策略的保存

    两种iptables的策略保存的方法

    2018-02-27
  • JVM性能调优监控工具jps、jstack、jmap、jhat、jstat、hprof使用详解

    摘要: JDK本身提供了很多方便的JVM性能调优监控工具,除了集成式的VisualVM和jConsole外,还有jps、jstack、jmap、jhat、jstat、hprof等小巧的工具,本博客希望能起抛砖引玉之用,让大家能开始对JVM性能调优的常用工具有所了解。     现实企业级Java开发中,有时候我们会碰到下面这些问题: Out…

    2017-08-17
  • 命令(2017.5.16-2017.519-部分)

    命令(1) bc  计算器 dd if=/dev/zero 查看逻辑设备(非硬件) dd if=/dev/sd 查看硬件设备 dd if=/dev/zeroof=file bs=1M count=24  写入磁盘速度 dd if=/dev/zeroof=/dev/null bs=1M count=24  测试…

    Linux干货 2017-05-22
  • Linux进程管理

    一、程序与进程           1、程序         程序是为了达到特定的目的,可以被计算机运行并且由命令代码组成的语句序列。       &…

    Linux干货 2015-05-14
  • 用户组和权限管理2

    十七、linux文件系统上的特殊权限     suid:s表示,sgid:s表示,sticky:t表示          安全上下文     前提:进程有属主和属组,文件有属主和属组  &n…

    Linux干货 2016-08-04
  • N27_网络班第九周作业

    N27_网络班第九周作业 1、写一个脚本,判断当前系统上所有用户的shell是否为可登录shell(即用户的shell不是/sbin/nologin);分别这两类用户的个数;通过字符串比较来实现 #!/bin/bash loginuser=`grep -v ‘/sbin/nologin’ /etc/passwd | wc -l` nologin=`grep …

    2017-10-10