rsyslog日志服务

一、知识整理:

1、日志服务rsyslogd新特点:

    多线程;

    基于SSL/TLS/UDP/TCP/RELP网络协议传输日志信息;

    强大的过滤器,实现过滤日志信息中任何部分的内容;

    自定义的输出格式;

    日志消息的及时分析框架

    存储日志信息与MySQLPGSQLOracleRDBMS

    配置文件中可以写简单的逻辑判断

    syslog配置文件相兼容

2、常见日志文件及作用

    /var/log/cron 记录了系统定时任务相关的日志;

    /var/log/cups 记录打印信息的日志;

    /var/log/dmesg 记录了系统在开机时内核自检的信息,也可以使用dmesg命令直接查看内核自检信息。

    /var/log/btmp 记录错误登录的日志,这个文件是二进制文件,不能直接vi查看,而要使用lastb命令查看;

    /var/log/lastlog 记录系统中所有用户最后一次的登录时间的日志。这个文件也是二进制文件,不能直接vi,而要使用lastlog命令查看。

    /var/log/mailog 记录邮件信息;

    /var/log/message 记录系统重要信息的日志,记录Linux系统的绝大多数重要信息,如果系统出现问题,首先要检查的就是应该是这个日志文件;

    /var/log/secure 记录验证和授权方面的信息,只要涉及账户和密码的程序都会记录。比如说系统的登录,ssh的登录,su切换用户,sudo授权,甚至添加用户和修改用户密码;

    /var/log/wtmp 永久记录所有用户的登录、注销信息,同时记录系统的启动、重启、关机事件。同样这个文件也是一个二进制文件不能直接vi而需要使用last命令来查看;

    /var/run/utmp 记录当前已经登录的用户的信息。这个文件会随着用户的登录和注销而不断变化,只记录当前登录用户的信息,同样这个文件不能直接vi,要使用wwhousers等命令;

    除了系统默认的日志外,rpm包安装的系统服务也默认把日志记录在/var/log/下(源码包在指定目录下)。不过这些日志不是系统记录和管理的,而是各个服务使用自己的日志管理文档来记录。

3、基本格式:日志基本格式

日志产生时间;发生事件的服务器主机名;发生事件的服务名或程序名;具体信息。

日志配置文件/etc/rsyslog.conf/etc/rsyslog.d/* ,配置文件格式简介:

服务名称[连接符号]日志等级      日志记录位置

(1)服务名称(facility):auth 安全和认证相关信息(不推荐使用authpriv替代)

    authpriv 安全和认证信息(私有的)

    cron 系统定时任务crontat产生的日志

    daemon 和各个守护进程相关的日志

    ftp    ftp守护进程产生的日志

    kern 内核产生的日志(不是用户进程产生的)

    local0-7 为本地使用预留的服务

    lpr   打印产生的日志

    mail     邮件日志信息

    syslog syslogd服务产生的日志信息,虽然服务名称改为rsyslogd,但是很多配置都还是沿用了syslogd的,这里并没有修改服务名

    user 用户等级类别的日志信息

    uucp uucp子系统的日志信息,uucp是早期Linux系统进行数据传递的协议,后来也常用在新闻组服务中

(2)连接符:. 只要比指定等级高的都记录下来

    .= 只记录等于指定等级的日志

    .! 代表不等于指定等级的日志都记录

(3)日志等级(priority):debug  一般的调试信息说明

    info 基本的通知信息

    notice  普通信息,但是有一定的重要性

    warning 警告信息,但是还不会影响到服务或系统的运行

    err 错误信息,已经可以影响到服务或系统的运行了

    crit 临界状况信息

    alert 警告状态信息,必须采取行动

    emerg 疼痛等级信息,系统已经无法使用

(4)可使用的日志记录位置

    /var/log/

    系统设备文件如/dev/lp0

    转发给远程主机,如@192.168.0.1.210:514

    用户名,如root

    模块: 如:ommysql:

4、日志轮替

日志文件的命名规则:

如果配置文件中拥有dateext”参数,那么日志会用日期来作为日志文件的后缀,例如secure-20150202.这样的话日志文件名不会重叠,所有也就不需要日志文件的改名,只需要保存指定的日志个数,删除多余的日志文件即可。

日志轮替(logrotate)配置文件/etc/logrotate.conf

daily 日志轮替周期是每天

weekly 每周

monthly 每月

rotate #   保留日志的文件的个数,0指没有备份

compress  日志轮替时,旧的日志进行压缩

creat  MODE  OWNER  GROUP

 建立新日志,同时指定新日志的权限与所有者和所属组;如creat 0600 root utmp

mail address 当日志轮替时,输出内容通过邮件发送到指定的邮件地址

missingok 如果日志不存在,则忽略该日志的警告信息

notifempty 如果日志为空文件,则不进行日志轮替

minsize 大小  日志轮替的最小值,日志达到最小值才会轮替

size 大小

dateext 使用日期作为日志轮替文件的后缀 如secure-20155555

注意:rpm包安装的程序默认轮替,源码包安装的需要自己修改配置或添加配置、指定日志目录等:

    vim /etc/logrotate.conf 打开后添加

    /usr/local/apache2/logs/access_logerror_log或其他日志) {

    daily

    create

    rotate 30

    }  (也可以在定义虚拟主机时定义)

日志由/sbin/init负责记录。

 

二、命令详解:

1logrotate命令 [] 配置文件名

如果此命令没有选项,则会按照配置文件中的条件进行日志轮替

-v 显示日志轮替过程

-f 强制进行日志轮替

2logger命令:

logger -a shell command interface to the syslog(3) system log module

logger [ options] [message]

logger -p local2.notice  "how are you"

 

三、课后练习:

LogAnalyzer 是一款syslog日志和其他网络事件数据的Web前端。它提供了对日志的简单浏览、搜索、基本分析和一些图表报告的功能。数据可以从数据库或一般的 syslog文本文件中获取,所以LogAnalyzer不需要改变现有的记录架构。基于当前的日志数据,它可以处理syslog日志消 息,Windows事件日志记录,支持故障排除,使用户能够快速查找日志数据中看出问题的解决方案。

LogAnalyzer 获取客户端日志会有两种保存模式,一种是直接读取客户端/var/log/目录下的日志并保存到服务端该目录下,一种是读取后保存到日志服务器数据库中,推荐使用后者。LogAnalyzer 采用php开发,所以日志服务器需要php的运行环境,本文采用LAMP。

步骤如下:

1)准备mysql,更改mysql配置文件my.cnf,添加如下:

    skip_name_resolve=ON

    innodb_file_per_table=1

(2)安装rsyslog连接至mysql server的驱动模块;

[root@localhost ~]# yum install rsyslog-mysql

3)在mysql-server准备rsyslog专用的用户账号,授权:

MariaDB [(none)]> GRANT ALL ON Syslog.* TO 'syslog'@'localhost' IDENTIFIED BY 'magedu';
Query OK, 0 rows affected (0.01 sec)
MariaDB [(none)]> GRANT ALL ON Syslog.* TO 'syslog'@'127.0.0.1' IDENTIFIED BY 'magedu';
MariaDB [(none)]> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)

生成所需要的数据库和表;使用重定向读入模块的命令:

[root@localhost ~]# mysql < /usr/share/doc/rsyslog-7.4.7/mysql-createDB.sql

(4)启用模块:

[root@localhost ~]# vim /etc/rsyslog.conf

MODULES一栏中添加:

    $ModLoad ommysql

    更改*.*日志生成的位置:添加

    *.*    :ommysql:127.0.0.1,Syslog,syslog,magedu

5)重启rsyslog服务

6)检测:启动mysql

[root@localhost ~]# logger -p local3.notice "how are youab"
[root@localhost ~]# logger -p local2.notice "how are youa"
MariaDB [Syslog]> SELECT * FROM SystemEvents\G

*************************** 11. row ***************************

                ID: 11

        CustomerID: NULL

        ReceivedAt: 2016-10-18 17:15:06

DeviceReportedTime: 2016-10-18 17:15:06

          Facility: 18

          Priority: 5

          FromHost: localhost

           Message: how are youa

        NTSeverity: NULL

        Importance: NULL

       EventSource: NULL

         EventUser: NULL

     EventCategory: NULL

           EventID: NULL

   EventBinaryData: NULL

      MaxAvailable: NULL

         CurrUsage: NULL

          MinUsage: NULL

          MaxUsage: NULL

        InfoUnitID: 1

         SysLogTag: root:

      EventLogType: NULL

   GenericFileName: NULL

          SystemID: NULL

11 rows in set (0.00 sec)

7)配置loganalyzer

    首先准备amp环境;安装httpdphp-gd(支持画图形)phpphp-server

    然后安装loganalyzer:

    cp -a src /html/

    ln -sv

    touch config.php

    chmod 666 config.php

    使用浏览器进行配置

    Table type monitorware

    chmod 644(安装完成后)

以上步骤也可以将原目录contrib中的两个脚本分别在安装前后执行。

安装步骤如下:

blob.png

此处注意:安装过程中出现了这个报错,找了各种日志也没发现原因,最后发现是需要关闭selinux。

blob.png

blob.png

blob.png

blob.png


blob.png

安装完成。

原创文章,作者:SilencePavilion,如若转载,请注明出处:http://www.178linux.com/53730

(0)
SilencePavilionSilencePavilion
上一篇 2016-10-24
下一篇 2016-10-24

相关推荐

  • N26_第四周

    1、复制/etc/skel目录为/home/tuser1,要求/home/tuser1及其内部文件的属组和其它用户均没有任何访问权限。 [root@node1 skel]# cp -r /etc/skel/home/tuser1 [root@node1 skel]# chmod go-wrx/home/tuser1/   2、编辑/etc/grou…

    Linux干货 2017-05-26
  • gitlab-ce官方文档查看备录

    gitlab文档 关于gitlab-ce GitLab Community Edition (CE) is available freely under the MIT Expat license. 关于unicorn的workers For&nbs…

    Linux干货 2015-09-06
  • 权限管理

    权限管理 在linux中的每一个文件或目录都包含有访问权限,这些访问权限决定了谁能访问和如何访问这些文件和目录。 我们先来看看文件的属性: 权限: r:可获取文件数据(读取文件) w:可修改文件的数据(写入数据) x:可以把此文件提请内核启动为一个进程 (执行) 文件的权限主要针对三类对象进行定义:  owner: 属主, u  grou…

    Linux干货 2016-08-05
  • 7-26第三课-帮助和bash基础命令

     命令:     1.获取帮助 内部命令     #help COMMAND     #man COMMAND 外部命令     # COMMAND …

    Linux干货 2016-07-29
  • 互联网安全之iptables/netfilter入门到进阶

    随着互联网技术的方兴未艾,各种网络应用层出不穷,网络攻击、黑客入侵也成了网民畅游互联网的心头大患,互联网安全也愈加受到了人们的重视。网络防火墙,作为一种简单高效的互联网防御手段,逐渐成为了网民畅游网络世界的保护伞。下面笔者介绍下Linux系统的守卫者——iptables/netfilter。  一 兄弟齐心,其利断金  iptables/netfilter就…

    Linux干货 2017-05-06
  • 第一周课程练习

    1、描述计算机的组成及其功能。 计算机由硬件、操作系统、软件三大部分组成。 硬件包括核心CPU(大脑处理中心)、必备电源(心脏动力来源)、硬盘(仓库)内存(中转站)、主板(协调)、网卡、声卡、显卡、风扇、光驱、显示器、鼠标、键盘、麦克风音箱,闪存、蓝牙等。  计算机五大组成部分及功能。   运算器:     …

    Linux干货 2016-08-15