Java【代码 17】httpclient PoolingHttpClientConnectionManager 连接池使用举例

本文主要是介绍Java【代码 17】httpclient PoolingHttpClientConnectionManager 连接池使用举例,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

httpclient 连接池使用举例

  • 1. 问题
    • 1.1 TIME_WAIT 状态连接的原因和解决策略
    • 1.2 CLOSE_WAIT 状态连接的原因和解决策略
    • 1.3 诊断工具
  • 2. 依赖
  • 3. 代码
    • 3.1 线程池配置
    • 3.2 方法调用
  • 4. 说明

1. 问题

服务器上有大量的time_wait或者close_wait状态的连接,故查询了 GPT。

1.1 TIME_WAIT 状态连接的原因和解决策略

  1. 大量短连接
    • 大量短暂的连接会导致短时间内生成大量的TIME_WAIT状态连接。
    • 解决方案:尽量使用长连接,减少连接的创建和销毁次数。
  2. TCP 时间等待池溢出
    • 如果服务器短时间内有大量的连接进入TIME_WAIT状态,可能会导致TCP时间等待池溢出。
    • 解决方案:可以通过调整内核参数来增加时间等待池的大小,或者减少TIME_WAIT状态的持续时间。
  3. 连接复用
    • 如果服务器的连接复用率低,可能会导致更多的TIME_WAIT状态连接。
    • 解决方案:使用连接池技术,提高连接的复用率。
  4. 内核参数调整
    • 可以通过调整内核参数来缩短TIME_WAIT状态的持续时间,例如调整net.ipv4.tcp_fin_timeout
    • 解决方案:在Linux系统中,可以通过调整内核参数来减少TIME_WAIT状态的持续时间,例如:
# 减少TIME_WAIT状态的持续时间
sysctl -w net.ipv4.tcp_fin_timeout=30
  1. SYN Cookies
    • 如果服务器面临SYN Flood攻击,可以启用SYN Cookies机制来缓解这种攻击。
    • 解决方案:在Linux系统中,可以通过设置net.ipv4.tcp_syncookies为1来启用SYN Cookies。

1.2 CLOSE_WAIT 状态连接的原因和解决策略

  1. 应用程序未正确关闭连接
    • 如果客户端或服务器的应用程序没有正确关闭连接,可能会导致连接停留在CLOSE_WAIT状态。
    • 解决方案:检查应用程序代码,确保所有连接在使用完毕后都正确关闭。
  2. 资源泄露
    • 如果应用程序未能释放资源或调用必要的关闭方法,也可能导致CLOSE_WAIT状态。
    • 解决方案:使用资源管理框架或工具来自动管理资源的生命周期。
  3. 第三方库问题
    • 如果您使用了第三方库或框架,可能存在某些库未能正确处理连接关闭的情况。
    • 解决方案:更新第三方库到最新版本,或者寻找替代方案。
  4. 网络延迟
    • 如果网络延迟较高,可能会导致关闭握手过程变慢,从而产生CLOSE_WAIT状态的连接。
    • 解决方案:优化网络配置,减少网络延迟。

1.3 诊断工具

  • netstat命令:使用netstat -an | grep TIME_WAITnetstat -an | grep CLOSE_WAIT来查看当前处于TIME_WAITCLOSE_WAIT状态的连接。
  • ss命令:使用ss -t -a | grep TIME_WAITss -t -a | grep CLOSE_WAIT来获取更详细的连接信息。

不得不说,大模型的回答还会很全面的。

2. 依赖

SpringBoot 项目依赖:

 <!-- https://mvnrepository.com/artifact/org.apache.httpcomponents/httpclient --><dependency><groupId>org.apache.httpcomponents</groupId><artifactId>httpclient</artifactId><version>4.5.13</version></dependency>

非 SpringBoot 项目需要引入:

  • httpclient-4.5.13.jar
  • httpcore-4.4.13.jar

3. 代码

3.1 线程池配置

import org.apache.http.impl.client.CloseableHttpClient;
import org.apache.http.impl.client.HttpClientBuilder;
import org.apache.http.impl.client.HttpClients;
import org.apache.http.impl.conn.PoolingHttpClientConnectionManager;/*** HttpClientManager管理*/
public class HttpClientManager {private static HttpClientBuilder httpClientBuilder = null;private static CloseableHttpClient closeableHttpClient = null;private HttpClientManager() {// 创建连接管理器PoolingHttpClientConnectionManager connMgr = new PoolingHttpClientConnectionManager();// 整个连接池的最大连接数connMgr.setMaxTotal(50);// 每个路由的最大连接数connMgr.setDefaultMaxPerRoute(50);// 创建HttpClientBuilder并设置连接管理器httpClientBuilder = HttpClients.custom().setConnectionManager(connMgr);}public static synchronized CloseableHttpClient getCloseableHttpClient() {if (closeableHttpClient == null) {new HttpClientManager();closeableHttpClient = httpClientBuilder.build();}return closeableHttpClient;}}
  1. setMaxTotal(int max):设置整个连接池的最大连接数。
  2. setDefaultMaxPerRoute(int max):设置每个路由(例如到同一主机的所有连接)的最大连接数【默认值是 2】。

在HTTP客户端中,“路由”是指客户端与服务器之间的一条逻辑路径。通常情况下,当客户端发送请求到不同的端点(即使是同一个服务器的不同URL),只要目标服务器相同,这些请求都会经过相同的网络路径,因此会被视为同一个路由。

  1. setMaxPerRoute(HttpRoute route, int max):可以针对特定路由设置最大连接数。

3.2 方法调用

    public JSONObject postHttpReq(String json, String url) {// 获取http客户端CloseableHttpClient httpClient = HttpClientManager.getCloseableHttpClient();// 设置超时时间RequestConfig requestConfig = RequestConfig.custom().setConnectTimeout(5000).setSocketTimeout(20000).setConnectionRequestTimeout(5000).build();// 封装请求参数byte[] b = json.getBytes();HttpEntity httpEntity = new ByteArrayEntity(b);String responseMsg = "";int statusCode = 0;CloseableHttpResponse response = null;try {// 创建httpPost请求HttpPost httpPost = new HttpPost(url);httpPost.setConfig(requestConfig);httpPost.setEntity(httpEntity);httpPost.setHeader("Content-Type", "application/json;charset=GBK");// 执行请求response = httpClient.execute(httpPost);// 获取请求结果statusCode = response.getStatusLine().getStatusCode();responseMsg = EntityUtils.toString(response.getEntity());} catch (IOException e1) {e1.printStackTrace();} finally {try {// 关闭当前请求response.close();} catch (IOException e2) {e2.printStackTrace();}}// 解析请求结果if (statusCode != 200) {// 输出错误信息} else {return new JSONObject(responseMsg);}}

4. 说明

  • 代码并不完善,没有关闭httpclient的方法和关闭连接池的方法。

这篇关于Java【代码 17】httpclient PoolingHttpClientConnectionManager 连接池使用举例的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1112379

相关文章

Java中流式并行操作parallelStream的原理和使用方法

《Java中流式并行操作parallelStream的原理和使用方法》本文详细介绍了Java中的并行流(parallelStream)的原理、正确使用方法以及在实际业务中的应用案例,并指出在使用并行流... 目录Java中流式并行操作parallelStream0. 问题的产生1. 什么是parallelS

Linux join命令的使用及说明

《Linuxjoin命令的使用及说明》`join`命令用于在Linux中按字段将两个文件进行连接,类似于SQL的JOIN,它需要两个文件按用于匹配的字段排序,并且第一个文件的换行符必须是LF,`jo... 目录一. 基本语法二. 数据准备三. 指定文件的连接key四.-a输出指定文件的所有行五.-o指定输出

Java中Redisson 的原理深度解析

《Java中Redisson的原理深度解析》Redisson是一个高性能的Redis客户端,它通过将Redis数据结构映射为Java对象和分布式对象,实现了在Java应用中方便地使用Redis,本文... 目录前言一、核心设计理念二、核心架构与通信层1. 基于 Netty 的异步非阻塞通信2. 编解码器三、

Linux jq命令的使用解读

《Linuxjq命令的使用解读》jq是一个强大的命令行工具,用于处理JSON数据,它可以用来查看、过滤、修改、格式化JSON数据,通过使用各种选项和过滤器,可以实现复杂的JSON处理任务... 目录一. 简介二. 选项2.1.2.2-c2.3-r2.4-R三. 字段提取3.1 普通字段3.2 数组字段四.

Linux kill正在执行的后台任务 kill进程组使用详解

《Linuxkill正在执行的后台任务kill进程组使用详解》文章介绍了两个脚本的功能和区别,以及执行这些脚本时遇到的进程管理问题,通过查看进程树、使用`kill`命令和`lsof`命令,分析了子... 目录零. 用到的命令一. 待执行的脚本二. 执行含子进程的脚本,并kill2.1 进程查看2.2 遇到的

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

一篇文章彻底搞懂macOS如何决定java环境

《一篇文章彻底搞懂macOS如何决定java环境》MacOS作为一个功能强大的操作系统,为开发者提供了丰富的开发工具和框架,下面:本文主要介绍macOS如何决定java环境的相关资料,文中通过代码... 目录方法一:使用 which命令方法二:使用 Java_home工具(Apple 官方推荐)那问题来了,

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

Java AOP面向切面编程的概念和实现方式

《JavaAOP面向切面编程的概念和实现方式》AOP是面向切面编程,通过动态代理将横切关注点(如日志、事务)与核心业务逻辑分离,提升代码复用性和可维护性,本文给大家介绍JavaAOP面向切面编程的概... 目录一、AOP 是什么?二、AOP 的核心概念与实现方式核心概念实现方式三、Spring AOP 的关

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置