链路追踪jaeger多环境部署

2024-01-29 01:08

本文主要是介绍链路追踪jaeger多环境部署,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

链路追踪

说明:一个es,三个收集器和三个ui,以索引前缀进行区分环境

jaegerUI工具


docker run -itd --name jaeger.ui.dev -p16686:16686 \-e STORAGE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e SPAN_STORAGE_TYPE=elasticsearch -e ES_TAGS_AS_FIELDS=true \jaegertracing/all-in-one:1.24 --es.index-prefix=devdocker run -itd --name jaeger.ui.check -p16696:16686 \-e STORAGE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e SPAN_STORAGE_TYPE=elasticsearch -e ES_TAGS_AS_FIELDS=true \jaegertracing/all-in-one:1.24 --es.index-prefix=checkdocker run -itd --name jaeger.ui.prod -p16706:16686 \-e STORAGE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e SPAN_STORAGE_TYPE=elasticsearch -e ES_TAGS_AS_FIELDS=true \jaegertracing/all-in-one:1.24 --es.index-prefix=prod

jaeger收集器

docker run -itd --name jaeger.control.dev \-e SPAN_STORAGE_TYPE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e LOG_LEVEL=debug \-p 14250:14250 -p 14269:14269 -p 14268:14268 \jaegertracing/jaeger-collector:1.24 --es.index-prefix=devdocker run -itd --name jaeger.control.check \-e SPAN_STORAGE_TYPE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e LOG_LEVEL=debug \-p 14260:14250 -p 14279:14269 -p 14278:14268 \jaegertracing/jaeger-collector:1.24 --es.index-prefix=checkdocker run -itd --name jaeger.control.prod \-e SPAN_STORAGE_TYPE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e LOG_LEVEL=debug \-p 14270:14250 -p 14289:14269 -p 14288:14268 \jaegertracing/jaeger-collector:1.24 --es.index-prefix=prod

端口说明 14269.信息查询端口、14250.grpc服务端口、 14268.http服务端口

elasticsearch


docker run -p 6123:9200 -p 9300:9300 -itd -e "discovery.type=single-node" --name elastic \-v /data/elastic/:/usr/share/elasticsearch/data \docker.elastic.co/elasticsearch/elasticsearch:7.9.2

另外jaeger.ui 的界面是可以自定义的,类似如下图

在这里插入图片描述
这种配置只需要在最初创建容器的时候指定一个配置

docker run -itd --name jaeger.ui.prod2 -p 16706:16686 -e STORAGE=elasticsearch -e ES_SERVER_URLS=http://172.16.64.12:6123 -e SPAN_STORAGE_TYPE=elasticsearch -e ES_TAGS_AS_FIELDS=true -v /etc/jaeger:/etc/conf.d jaegertracing/all-in-one:1.24 --es.index-prefix=prod --query.ui-config=etc/conf.d/prod.jaeger-ui.conf.json

prod.jaeger-ui.conf.json内容

{"dependencies": {"dagMaxNumServices": 200,"menuEnabled": true},"monitor": {"menuEnabled": true},"archiveEnabled": true,"tracking": {"gaID": "UA-000000-3","trackErrors": true},"menu": [{"label": "链路分析","items": [{"label": "链路sql分析","url": "http://172.16.64.12:9002/trace/analyse/high_time_sql/view"},{"label":"链路业务分析","url":"http://172.16.64.12:9002/trace/analyse/high_time_trace/view"}]}],"search": {"maxLookback": {"label": "5 Days","value": "5d"},"maxLimit": 1500},"linkPatterns": [{"type": "process","key": "jaeger.version","url": "https://github.com/jaegertracing/jaeger-client-java/releases/tag/#{jaeger.version}","text": "Information about Jaeger release #{jaeger.version}"}]
}

然后通过点击上图中对应的链接,就会跳转到对应的页面
在这里插入图片描述
这个页面前端是用vue写的,后端用golang


将es换成clickhouse,节约磁盘

前言:
clickhouse 为列式存储引擎,
与es比有数据高压缩率优势。

clickhouse安装

端口 8123.http访问端口、9000.客户端访问端口、9363.prometheus监控端口
config.xml(配置文件比较大,可以建一个新容器然后从里面拷贝出来)

# 只修改这个地方,把注释打开<prometheus><endpoint>/metrics</endpoint><port>9363</port><metrics>true</metrics><events>true</events><asynchronous_metrics>true</asynchronous_metrics></prometheus>
docker run -itd --name clickhouse --ulimit nofile=262144:262144 \-p 18123:8123 -p 19000:9000 -p 19363:9363  \-v /soft/src/clickhouse/data:/var/lib/clickhouse \-v /soft/src/clickhouse/config.xml:/etc/clickhouse-server/config.xml  \-v /soft/src/clickhouse/logs:/var/log/clickhouse-server  clickhouse/clickhouse-server

桌面客户端
下载地址 https://dbeaver.io/download/
使用方式与navicat 一致,就不详细讲解了。

jaeger工具链接clickhouse

插件附件(config.yaml jaeger-clickhouse)
config.yaml

# clickhouse 存储引擎访问地址
address: 172.16.64.12:19000
# Directory with .sql files to run at plugin startup, mainly for integration tests.
# Depending on the value of "init_tables", this can be run as a
# replacement or supplement to creating default tables for span storage.
# If init_tables is also enabled, the scripts in this directory will be run first.
init_sql_scripts_dir:
# Whether to automatically attempt to create tables in ClickHouse.
# By default, this is enabled if init_sql_scripts_dir is empty,
# or disabled if init_sql_scripts_dir is provided.
init_tables:
# Maximal amount of spans that can be pending writes at a time.
# New spans exceeding this limit will be discarded,
# keeping memory in check if there are issues writing to ClickHouse.
# Check the "jaeger_clickhouse_discarded_spans" metric to keep track of discards.
# If 0, no limit is set. Default 10_000_000.
max_span_count:
# Batch write size. Default 10_000.
batch_write_size:
# Batch flush interval. Default 5s.
batch_flush_interval:
# Encoding of stored data. Either json or protobuf. Default json.
encoding:
# Path to CA TLS certificate.
ca_file:
# Username for connection to ClickHouse. Default is "default".
username:
# Password for connection to ClickHouse.
password:
# ClickHouse database name. The database must be created manually before Jaeger starts. Default is "default".
database: dev
# If non-empty, enables a tenant column in tables, and uses the provided tenant name for this instance.
# Default is empty. See guide-multitenancy.md for more information.
tenant:
# 用于服务prometheus指标的端点。默认localhost: 9090。 必填(不开放时建议填一个无用端口)
metrics_endpoint: localhost:9091
# Whether to use sql scripts supporting replication and sharding.
# Replication can be used only on database with Atomic engine.
# Default false.
replication:
# Table with spans. Default "jaeger_spans_local" or "jaeger_spans" when replication is enabled.
# 前缀,可自己指定
spans_table: otel_traces
# Span index table. Default "jaeger_index_local" or "jaeger_index" when replication is enabled.
# 前缀,可自己指定
spans_index_table: otel_traces_trace_id_ts
# Operations table. Default "jaeger_operations_local" or "jaeger_operations" when replication is enabled.
operations_table:
# TTL for data in tables in days. If 0, no TTL is set. Default 0.
ttl:
# The maximum number of spans to fetch per trace. If 0, no limit is set. Default 0.
max_num_spans:

如果三个环境用同一个clickhouse,需要指定(database: dev)库,通过不同的库区分,避免索引冲突,当然库需要提前创建
jaeger-clickhouse见附件(详情见官网:https://www.jaegertracing.io/docs/1.52/deployment/#remote-storage-component)

SPAN_STORAGE_TYPE=grpc-plugin 存储类型改为插件
–grpc-storage-plugin.binary 配置插件路径(容器内路径)
–grpc-storage-plugin.configuration-file 配置插件配置文件路径(容器内路径)
jaeger collector 收集器

jaeger.conrol 组件删除原有的重启新的,数据的存储地址调整为clickhouse

docker run -itd --name jaeger.control-dev \-e SPAN_STORAGE_TYPE=grpc-plugin \-v /soft/src/clickhouse-dev/jaeger-clickhouse:/home/jaeger-clickhouse \-v /soft/src/clickhouse-dev/config.yaml:/home/config.yaml \-p 14250:14250 -p 14269:14269 -p 14268:14268 \jaegertracing/jaeger-collector:1.52 --grpc-storage-plugin.binary=/home/jaeger-clickhouse --grpc-storage-plugin.configuration-file=/home/config.yaml

jaeger query 查询ui

jaeger·ui 组件删除原有容器重启新的容器,数据读取来源调整为clickhouse

docker run -itd --name jaeger.ui-dev \-e SPAN_STORAGE_TYPE=grpc-plugin \-p 18686:16686 \-p 18687:16687 \-p 18685:16685 \-v /soft/src/clickhouse-dev/jaeger-clickhouse:/home/jaeger-clickhouse \-v /soft/src/clickhouse-dev/config.yaml:/home/config.yaml \jaegertracing/jaeger-query:1.52 --grpc-storage-plugin.binary=/home/jaeger-clickhouse --grpc-storage-plugin.configuration-file=/home/config.yaml

这篇关于链路追踪jaeger多环境部署的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/655332

相关文章

SpringBoot多环境配置数据读取方式

《SpringBoot多环境配置数据读取方式》SpringBoot通过环境隔离机制,支持properties/yaml/yml多格式配置,结合@Value、Environment和@Configura... 目录一、多环境配置的核心思路二、3种配置文件格式详解2.1 properties格式(传统格式)1.

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程:创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do

Go语言编译环境设置教程

《Go语言编译环境设置教程》Go语言支持高并发(goroutine)、自动垃圾回收,编译为跨平台二进制文件,云原生兼容且社区活跃,开发便捷,内置测试与vet工具辅助检测错误,依赖模块化管理,提升开发效... 目录Go语言优势下载 Go  配置编译环境配置 GOPROXYIDE 设置(VS Code)一些基本

MySQL 主从复制部署及验证(示例详解)

《MySQL主从复制部署及验证(示例详解)》本文介绍MySQL主从复制部署步骤及学校管理数据库创建脚本,包含表结构设计、示例数据插入和查询语句,用于验证主从同步功能,感兴趣的朋友一起看看吧... 目录mysql 主从复制部署指南部署步骤1.环境准备2. 主服务器配置3. 创建复制用户4. 获取主服务器状态5

Windows环境下解决Matplotlib中文字体显示问题的详细教程

《Windows环境下解决Matplotlib中文字体显示问题的详细教程》本文详细介绍了在Windows下解决Matplotlib中文显示问题的方法,包括安装字体、更新缓存、配置文件设置及编码調整,并... 目录引言问题分析解决方案详解1. 检查系统已安装字体2. 手动添加中文字体(以SimHei为例)步骤

Java JDK1.8 安装和环境配置教程详解

《JavaJDK1.8安装和环境配置教程详解》文章简要介绍了JDK1.8的安装流程,包括官网下载对应系统版本、安装时选择非系统盘路径、配置JAVA_HOME、CLASSPATH和Path环境变量,... 目录1.下载JDK2.安装JDK3.配置环境变量4.检验JDK官网下载地址:Java Downloads

golang程序打包成脚本部署到Linux系统方式

《golang程序打包成脚本部署到Linux系统方式》Golang程序通过本地编译(设置GOOS为linux生成无后缀二进制文件),上传至Linux服务器后赋权执行,使用nohup命令实现后台运行,完... 目录本地编译golang程序上传Golang二进制文件到linux服务器总结本地编译Golang程序

如何在Ubuntu 24.04上部署Zabbix 7.0对服务器进行监控

《如何在Ubuntu24.04上部署Zabbix7.0对服务器进行监控》在Ubuntu24.04上部署Zabbix7.0监控阿里云ECS服务器,需配置MariaDB数据库、开放10050/1005... 目录软硬件信息部署步骤步骤 1:安装并配置mariadb步骤 2:安装Zabbix 7.0 Server

SQLite3 在嵌入式C环境中存储音频/视频文件的最优方案

《SQLite3在嵌入式C环境中存储音频/视频文件的最优方案》本文探讨了SQLite3在嵌入式C环境中存储音视频文件的优化方案,推荐采用文件路径存储结合元数据管理,兼顾效率与资源限制,小文件可使用B... 目录SQLite3 在嵌入式C环境中存储音频/视频文件的专业方案一、存储策略选择1. 直接存储 vs

MySQL追踪数据库表更新操作来源的全面指南

《MySQL追踪数据库表更新操作来源的全面指南》本文将以一个具体问题为例,如何监测哪个IP来源对数据库表statistics_test进行了UPDATE操作,文内探讨了多种方法,并提供了详细的代码... 目录引言1. 为什么需要监控数据库更新操作2. 方法1:启用数据库审计日志(1)mysql/mariad