ELK日志分析平台之helloworld

2024-06-23 12:38

本文主要是介绍ELK日志分析平台之helloworld,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.1  软件环境说明

本次安装部署所用的软件均为官网上目前的最新版本。

操作系统

软件

Java环境

Centos 7

(服务器)

logstash-6.2.4 .tar.gz

openjdk 1.8.0_161

elasticsearch-6.2.4.tar.gz

kibana-6.2.4-linux-x86_64.tar.gz

redis-4.0.9.tar.gz

Windows 7

logstash-6.2.4.zip

jdk1.8.0_91

1.2  Hello word安装部署

1.2.1           Logstash安装

a.        解压zip包(logstash-6.2.4.zip);

b.       进入bin目录下,新定义一个配置文件:logstash-simple.conf(名称可自定义),这里采取最简单的标准输入输出;(注意,里面的elasticsearch输出配置可后续添加)

c.        进入windows的cmd窗口,使用命令进入配置文件所在的bin目录,启动logstash;(logstash –f logstash-simple.conf)

 


d.       输入一个简单的hello word,可以看到Logstash已经成功读取刚刚输入的字符串。

1.2.2           Elasticsearch安装

a.        解压tar包(tar -zxvf elasticsearch-6.2.4.tar.gz);

b.       修改elasticsearch.yml文件;

c.        启动elasticsearch;

d.       访问elasticsearch,出现“you know,for search”则表明启动成功;

e.        试查询一下刚刚Logstash已经读取的的helloword,在elasticsearch窗口输入:curl http://10.10.12.243:9200/_search?q=hello,或者也可以使用浏览器进行搜索,网址栏内输入:http://10.10.12.243:9200/_search?q=hello进行查询,查看结果;


 1.2.3           Kibanna安装

a.        解压tar包(tar –zxvf kibana-6.2.4-linux-x86_64.tar.gz);

b.       修改kibanna.yml文件;

c.        启动kibanna;

d.       访问kibanna;


e.        可以看到首页右上角的提醒,需要首先进行索引配置;

f.        在输入框内输入*,代表discover页面默认查询所有数据;然后选择每页显示的数据条数;点击下一步;

g.       选择@timestamp,代表discover页面会根据时间戳显示并统计你的数据;完成设置;

h.       再次进入discover页面,发现首页没有显示刚刚输入的helloword数据,是因为discover页面默认显示15分钟内的所有数据;

 

i.         在搜索栏中输入hello,页面选择合适的时间段,点击查询,查看结果。

1.2.4           加入Redis缓冲队列

a.        解压tar包(tar –zxvf redis-4.0.9.tar.gz);

b.       进入redis文件夹,进行make编译;

c.        make完后,查看redis主目录下是否生成redis-server(服务端程序)和redis-cli(客户端程序)命令文件;若没有,查看是否生成bin目录,再去查看bin目录下的文件;若还是没有,则查看src目录;(官网上说的是会在redis主目录下,还有资料说是在bin目录下,实际上本次安装结果是存在于src目录下);

d.       进入src目录下,启动redis服务.

e.        访问redis(curlhttp://redis.io)或者启动redis-cli客户端,输入一个key-value值,查看是否启动成功;

f.        更改客户端logstash的输出配置为redis;

g.       在服务端起一个logstash,并自定义配置文件(logstash-simple.conf)输入配置为redis,输出配置为elasticsearch;(注意:服务端和客户端中,redis的key值要保持一致)

h.       重新启动各项软件,输入hello redis,分别查看客户端和服务端的Logstash显示;

i.         在kibana继续输入hello进行查询,查看结果;完成elk+redis系列的部署。


这篇关于ELK日志分析平台之helloworld的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1087184

相关文章

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

Linux之platform平台设备驱动详解

《Linux之platform平台设备驱动详解》Linux设备驱动模型中,Platform总线作为虚拟总线统一管理无物理总线依赖的嵌入式设备,通过platform_driver和platform_de... 目录platform驱动注册platform设备注册设备树Platform驱动和设备的关系总结在 l

Olingo分析和实践之EDM 辅助序列化器详解(最佳实践)

《Olingo分析和实践之EDM辅助序列化器详解(最佳实践)》EDM辅助序列化器是ApacheOlingoOData框架中无需完整EDM模型的智能序列化工具,通过运行时类型推断实现灵活数据转换,适用... 目录概念与定义什么是 EDM 辅助序列化器?核心概念设计目标核心特点1. EDM 信息可选2. 智能类

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

Olingo分析和实践之ODataImpl详细分析(重要方法详解)

《Olingo分析和实践之ODataImpl详细分析(重要方法详解)》ODataImpl.java是ApacheOlingoOData框架的核心工厂类,负责创建序列化器、反序列化器和处理器等组件,... 目录概述主要职责类结构与继承关系核心功能分析1. 序列化器管理2. 反序列化器管理3. 处理器管理重要方

使用Python构建一个高效的日志处理系统

《使用Python构建一个高效的日志处理系统》这篇文章主要为大家详细讲解了如何使用Python开发一个专业的日志分析工具,能够自动化处理、分析和可视化各类日志文件,大幅提升运维效率,需要的可以了解下... 目录环境准备工具功能概述完整代码实现代码深度解析1. 类设计与初始化2. 日志解析核心逻辑3. 文件处

SpringBoot中六种批量更新Mysql的方式效率对比分析

《SpringBoot中六种批量更新Mysql的方式效率对比分析》文章比较了MySQL大数据量批量更新的多种方法,指出REPLACEINTO和ONDUPLICATEKEY效率最高但存在数据风险,MyB... 目录效率比较测试结构数据库初始化测试数据批量修改方案第一种 for第二种 case when第三种

解决1093 - You can‘t specify target table报错问题及原因分析

《解决1093-Youcan‘tspecifytargettable报错问题及原因分析》MySQL1093错误因UPDATE/DELETE语句的FROM子句直接引用目标表或嵌套子查询导致,... 目录报js错原因分析具体原因解决办法方法一:使用临时表方法二:使用JOIN方法三:使用EXISTS示例总结报错原

MySQL中的LENGTH()函数用法详解与实例分析

《MySQL中的LENGTH()函数用法详解与实例分析》MySQLLENGTH()函数用于计算字符串的字节长度,区别于CHAR_LENGTH()的字符长度,适用于多字节字符集(如UTF-8)的数据验证... 目录1. LENGTH()函数的基本语法2. LENGTH()函数的返回值2.1 示例1:计算字符串

Android kotlin中 Channel 和 Flow 的区别和选择使用场景分析

《Androidkotlin中Channel和Flow的区别和选择使用场景分析》Kotlin协程中,Flow是冷数据流,按需触发,适合响应式数据处理;Channel是热数据流,持续发送,支持... 目录一、基本概念界定FlowChannel二、核心特性对比数据生产触发条件生产与消费的关系背压处理机制生命周期