ELK日志分析平台之helloworld

2024-06-23 12:38

本文主要是介绍ELK日志分析平台之helloworld,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.1  软件环境说明

本次安装部署所用的软件均为官网上目前的最新版本。

操作系统

软件

Java环境

Centos 7

(服务器)

logstash-6.2.4 .tar.gz

openjdk 1.8.0_161

elasticsearch-6.2.4.tar.gz

kibana-6.2.4-linux-x86_64.tar.gz

redis-4.0.9.tar.gz

Windows 7

logstash-6.2.4.zip

jdk1.8.0_91

1.2  Hello word安装部署

1.2.1           Logstash安装

a.        解压zip包(logstash-6.2.4.zip);

b.       进入bin目录下,新定义一个配置文件:logstash-simple.conf(名称可自定义),这里采取最简单的标准输入输出;(注意,里面的elasticsearch输出配置可后续添加)

c.        进入windows的cmd窗口,使用命令进入配置文件所在的bin目录,启动logstash;(logstash –f logstash-simple.conf)

 


d.       输入一个简单的hello word,可以看到Logstash已经成功读取刚刚输入的字符串。

1.2.2           Elasticsearch安装

a.        解压tar包(tar -zxvf elasticsearch-6.2.4.tar.gz);

b.       修改elasticsearch.yml文件;

c.        启动elasticsearch;

d.       访问elasticsearch,出现“you know,for search”则表明启动成功;

e.        试查询一下刚刚Logstash已经读取的的helloword,在elasticsearch窗口输入:curl http://10.10.12.243:9200/_search?q=hello,或者也可以使用浏览器进行搜索,网址栏内输入:http://10.10.12.243:9200/_search?q=hello进行查询,查看结果;


 1.2.3           Kibanna安装

a.        解压tar包(tar –zxvf kibana-6.2.4-linux-x86_64.tar.gz);

b.       修改kibanna.yml文件;

c.        启动kibanna;

d.       访问kibanna;


e.        可以看到首页右上角的提醒,需要首先进行索引配置;

f.        在输入框内输入*,代表discover页面默认查询所有数据;然后选择每页显示的数据条数;点击下一步;

g.       选择@timestamp,代表discover页面会根据时间戳显示并统计你的数据;完成设置;

h.       再次进入discover页面,发现首页没有显示刚刚输入的helloword数据,是因为discover页面默认显示15分钟内的所有数据;

 

i.         在搜索栏中输入hello,页面选择合适的时间段,点击查询,查看结果。

1.2.4           加入Redis缓冲队列

a.        解压tar包(tar –zxvf redis-4.0.9.tar.gz);

b.       进入redis文件夹,进行make编译;

c.        make完后,查看redis主目录下是否生成redis-server(服务端程序)和redis-cli(客户端程序)命令文件;若没有,查看是否生成bin目录,再去查看bin目录下的文件;若还是没有,则查看src目录;(官网上说的是会在redis主目录下,还有资料说是在bin目录下,实际上本次安装结果是存在于src目录下);

d.       进入src目录下,启动redis服务.

e.        访问redis(curlhttp://redis.io)或者启动redis-cli客户端,输入一个key-value值,查看是否启动成功;

f.        更改客户端logstash的输出配置为redis;

g.       在服务端起一个logstash,并自定义配置文件(logstash-simple.conf)输入配置为redis,输出配置为elasticsearch;(注意:服务端和客户端中,redis的key值要保持一致)

h.       重新启动各项软件,输入hello redis,分别查看客户端和服务端的Logstash显示;

i.         在kibana继续输入hello进行查询,查看结果;完成elk+redis系列的部署。


这篇关于ELK日志分析平台之helloworld的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1087184

相关文章

Nginx分布式部署流程分析

《Nginx分布式部署流程分析》文章介绍Nginx在分布式部署中的反向代理和负载均衡作用,用于分发请求、减轻服务器压力及解决session共享问题,涵盖配置方法、策略及Java项目应用,并提及分布式事... 目录分布式部署NginxJava中的代理代理分为正向代理和反向代理正向代理反向代理Nginx应用场景

Redis中的有序集合zset从使用到原理分析

《Redis中的有序集合zset从使用到原理分析》Redis有序集合(zset)是字符串与分值的有序映射,通过跳跃表和哈希表结合实现高效有序性管理,适用于排行榜、延迟队列等场景,其时间复杂度低,内存占... 目录开篇:排行榜背后的秘密一、zset的基本使用1.1 常用命令1.2 Java客户端示例二、zse

Redis中的AOF原理及分析

《Redis中的AOF原理及分析》Redis的AOF通过记录所有写操作命令实现持久化,支持always/everysec/no三种同步策略,重写机制优化文件体积,与RDB结合可平衡数据安全与恢复效率... 目录开篇:从日记本到AOF一、AOF的基本执行流程1. 命令执行与记录2. AOF重写机制二、AOF的

MyBatis Plus大数据量查询慢原因分析及解决

《MyBatisPlus大数据量查询慢原因分析及解决》大数据量查询慢常因全表扫描、分页不当、索引缺失、内存占用高及ORM开销,优化措施包括分页查询、流式读取、SQL优化、批处理、多数据源、结果集二次... 目录大数据量查询慢的常见原因优化方案高级方案配置调优监控与诊断总结大数据量查询慢的常见原因MyBAT

分析 Java Stream 的 peek使用实践与副作用处理方案

《分析JavaStream的peek使用实践与副作用处理方案》StreamAPI的peek操作是中间操作,用于观察元素但不终止流,其副作用风险包括线程安全、顺序混乱及性能问题,合理使用场景有限... 目录一、peek 操作的本质:有状态的中间操作二、副作用的定义与风险场景1. 并行流下的线程安全问题2. 顺

MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决

《MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决》MyBatis默认开启一级缓存,同一事务中循环调用查询方法时会重复使用缓存数据,导致获取的序列主键值均为1,... 目录问题原因解决办法如果是存储过程总结问题myBATis有如下代码获取序列作为主键IdMappe

Java 日志中 Marker 的使用示例详解

《Java日志中Marker的使用示例详解》Marker是SLF4J(以及Logback、Log4j2)提供的一个接口,它本质上是一个命名对象,你可以把它想象成一个可以附加到日志语句上的标签或戳... 目录什么是Marker?为什么使用Markejavascriptr?1. 精细化的过滤2. 触发特定操作3

linux查找java项目日志查找报错信息方式

《linux查找java项目日志查找报错信息方式》日志查找定位步骤:进入项目,用tail-f实时跟踪日志,tail-n1000查看末尾1000行,grep搜索关键词或时间,vim内精准查找并高亮定位,... 目录日志查找定位在当前文件里找到报错消息总结日志查找定位1.cd 进入项目2.正常日志 和错误日

Java中最全最基础的IO流概述和简介案例分析

《Java中最全最基础的IO流概述和简介案例分析》JavaIO流用于程序与外部设备的数据交互,分为字节流(InputStream/OutputStream)和字符流(Reader/Writer),处理... 目录IO流简介IO是什么应用场景IO流的分类流的超类类型字节文件流应用简介核心API文件输出流应用文

Java使用Javassist动态生成HelloWorld类

《Java使用Javassist动态生成HelloWorld类》Javassist是一个非常强大的字节码操作和定义库,它允许开发者在运行时创建新的类或者修改现有的类,本文将简单介绍如何使用Javass... 目录1. Javassist简介2. 环境准备3. 动态生成HelloWorld类3.1 创建CtC