centos+rsyslog+mysql+loganalyzer搭建日志服务器

2024-08-24 06:38

本文主要是介绍centos+rsyslog+mysql+loganalyzer搭建日志服务器,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

实验环境:

centos6.10(192.168.0.60)、centos7.9(192.168.0.79)、rsyslog、mairadb。为了好记,所以ip地址对应centos版本号。两个系统上都有mariadb(mysql)。

实验目的:

centos6安装mariadb10.5.13,充当日志数据库服务器。同时也是测试客户端。

centos7充当rsyslog日志服务器,如果客户端产生日志,会传给centos7来记录。使用文件记录日志时,centos6的日志会存在centos7的日志文件中。而使用mysql时,又希望centos7传给远程的mysql,这里mysql就使用centos6。

等于转了个圈,只为测试,有意“提高”难度。过程如下:

centos6本机测试:

cat /dev/null > /var/log/messages;tail /var/log/messages:清空日志,没有任何内容。

service rsyslog restart;tail /var/log/messages:输出重启rsyslog服务产生的日志。

centos6操作,centos7存储日志文件:

1、centos6上编辑/etc/rsyslog.conf: 

编辑RULES段,把之前传给messages日志文件的内容,定向到centos7(192.168.0.79)。

2、centos7上编辑/etc/rsyslog.conf:

 编辑MODULES段,开启端口监听。一定记着防火墙,firewall-cmd要么关闭,要么允许514通过。

3、测试:

centos7清空日志并验证:

 centos6重启rsyslog服务,清空并验证日志:

 发现什么也没有了。再看centos7:

 原本centos6上重启rsyslog的日志记录在了centos7的messages文件中。达到预期效果。

centos6操作,centos7收集日志,再发给centos6的mariadb:

1、centos6编辑rsyslog.conf,指向centos7,同上。

2、centos7安装rsyslog-mysql包:

这个要说明一下,我的环境下,yum list rsyslog-mysql看到的是i686平台的包,但光盘镜像上确实能看到x86_64的包,所以直接yum是不行的,我这样写的:

yum install /media/cdrom/Packages/rsyslog-mysql-8.24.0-55.el7.x86_64.rpm

安装mysql包以后,rsyslog日志采集服务就可以链接mysql了。

使用rpm -ql查看一下就知道,rsyslog-mysql包有一个sql脚本文件:

/usr/share/doc/rsyslog-8.24.0/mysql-createDB.sql

我的centos7上是有mysql客户端的,所以我使用输入重定向,就可以在centos6上执行脚本:

mysql -h 192.168.0.60 -p < /usr/share/doc/rsyslog-8.24.0/mysql-createDB.sql

当然centos6上的mariadb是需要赋予相应权限的,也可以把脚本拿到centos6上本地执行。

根据sql脚本所示,生成的数据库和表名是:Syslog.SyslogEvents。顺便授权一个用户:syslog@syslogpwd。待会儿配置文件里用。

3、centos7编辑配置文件rsyslog.conf:

modules段确保开启收集日志监听端口,添加ommysql模块,rules段日志保存定向到centos6的mysql。

 mysql定向的格式为:

:ommysql:host,db_name,user_name,user_password

centos7重启rsyslog服务,使配置生效。

4、测试:

centos6和centos7都清空日志文件。

centos6重启rsyslog服务,卸载vim,安装vim,本机messages文件中看不到日志。

centos7的message文件中也没有日志。

 centos6中打开mysql查询Syslog.SystemEvents表,看到日志都在这里了。

 测试完成。达到预期效果。

其实,这时候在centos7上的操作,原本收集到messages的日志都会到centos6的mysql中国去了。因此,接下来要配置一个图形化的工具loganalyzer。

搭建loganalyzer:

下载地址:https://loganalyzer.adiscon.com/download/

它就是个站点,我就不折腾了,装在centos6上。

cd;    tar -xf loganalyzer-4.1.12.tar;     cp loganalyzer-4.1.12 /var/www/html/loganalyzer

cd /var/www/html/loganalyzer/src;    bash ../contrib/*.sh

它的目录下src作为站点根,也可以只复制src到站点目录。contrib目录下有脚本文件,内容很简单,就是用来生成config.php配置文件并赋予权限的。我运行脚本,从来不喜欢赋予执行权限在复制过去,临时执行一下没必要,带上路径bash一下就好。然后就没有然后了,保证httpd服务没问题就好。

浏览器输入站点路径就可以了http://192.168.0.60/loganalyzer/src/install.php。第一次记着访问install.php页面,忘了也没关系,它会提示你并给个链接。

 界面挺好看的吧。按照提示一路next就可以了,数据库链接等都能配置好。然后界面就出来了。还带浮窗,信息非常全。甚至可以有图表。

但是要说明,为了显示这个图表需要php的GD模块,我费了很大周折,请见另外一篇博客。

php编译安装GD模块定制安装的一大推问题_大橘子的博客-CSDN博客

本文完。

这篇关于centos+rsyslog+mysql+loganalyzer搭建日志服务器的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1101735

相关文章

MySQL 中的 CAST 函数详解及常见用法

《MySQL中的CAST函数详解及常见用法》CAST函数是MySQL中用于数据类型转换的重要函数,它允许你将一个值从一种数据类型转换为另一种数据类型,本文给大家介绍MySQL中的CAST... 目录mysql 中的 CAST 函数详解一、基本语法二、支持的数据类型三、常见用法示例1. 字符串转数字2. 数字

Mysql实现范围分区表(新增、删除、重组、查看)

《Mysql实现范围分区表(新增、删除、重组、查看)》MySQL分区表的四种类型(范围、哈希、列表、键值),主要介绍了范围分区的创建、查询、添加、删除及重组织操作,具有一定的参考价值,感兴趣的可以了解... 目录一、mysql分区表分类二、范围分区(Range Partitioning1、新建分区表:2、分

MySQL 定时新增分区的实现示例

《MySQL定时新增分区的实现示例》本文主要介绍了通过存储过程和定时任务实现MySQL分区的自动创建,解决大数据量下手动维护的繁琐问题,具有一定的参考价值,感兴趣的可以了解一下... mysql创建好分区之后,有时候会需要自动创建分区。比如,一些表数据量非常大,有些数据是热点数据,按照日期分区MululbU

SQL Server配置管理器无法打开的四种解决方法

《SQLServer配置管理器无法打开的四种解决方法》本文总结了SQLServer配置管理器无法打开的四种解决方法,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录方法一:桌面图标进入方法二:运行窗口进入检查版本号对照表php方法三:查找文件路径方法四:检查 S

MySQL 删除数据详解(最新整理)

《MySQL删除数据详解(最新整理)》:本文主要介绍MySQL删除数据的相关知识,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录一、前言二、mysql 中的三种删除方式1.DELETE语句✅ 基本语法: 示例:2.TRUNCATE语句✅ 基本语

MySQL中查找重复值的实现

《MySQL中查找重复值的实现》查找重复值是一项常见需求,比如在数据清理、数据分析、数据质量检查等场景下,我们常常需要找出表中某列或多列的重复值,具有一定的参考价值,感兴趣的可以了解一下... 目录技术背景实现步骤方法一:使用GROUP BY和HAVING子句方法二:仅返回重复值方法三:返回完整记录方法四:

从入门到精通MySQL联合查询

《从入门到精通MySQL联合查询》:本文主要介绍从入门到精通MySQL联合查询,本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下... 目录摘要1. 多表联合查询时mysql内部原理2. 内连接3. 外连接4. 自连接5. 子查询6. 合并查询7. 插入查询结果摘要前面我们学习了数据库设计时要满

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

解读GC日志中的各项指标用法

《解读GC日志中的各项指标用法》:本文主要介绍GC日志中的各项指标用法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、基础 GC 日志格式(以 G1 为例)1. Minor GC 日志2. Full GC 日志二、关键指标解析1. GC 类型与触发原因2. 堆

MySQL查询JSON数组字段包含特定字符串的方法

《MySQL查询JSON数组字段包含特定字符串的方法》在MySQL数据库中,当某个字段存储的是JSON数组,需要查询数组中包含特定字符串的记录时传统的LIKE语句无法直接使用,下面小编就为大家介绍两种... 目录问题背景解决方案对比1. 精确匹配方案(推荐)2. 模糊匹配方案参数化查询示例使用场景建议性能优