Java:Apache HttpClient中HttpRoute用法的介绍

当使用Apache HttpClient组件时,经常会用到它的连接池组件。典型的代码如下:

复制代码
		PoolingHttpClientConnectionManager connectionManager = new PoolingHttpClientConnectionManager();
		connectionManager.setMaxTotal(httpConfig.getMaxPoolTotal());
		connectionManager.setDefaultMaxPerRoute(httpConfig.getMaxDefaultPerRoute());

		RequestConfig requestConfig = RequestConfig.custom() //
				.setConnectTimeout(httpConfig.getConnectTimeout()) //
				.setConnectionRequestTimeout(httpConfig.getConnectionRequestTimeout())//
				.setSocketTimeout(httpConfig.getSocketTimeout())//
				.build();

		HttpClientBuilder httpClientBuilder = HttpClientBuilder.create() //
				.setConnectionManager(connectionManager) //
				.setDefaultRequestConfig(requestConfig) //
				.useSystemProperties();

		HttpClient httpClient = httpClientBuilder.build();

其中maxTotal表示此连接池的最大连接数,defaultMaxPerRoute表示每路由最大连接数。这里主涉及到route在Apache HttpClient组件中是怎么使用的问题。先分析一下Apache HttpClient的源代码。以下使用的源代码版本4.5.14。

org.apache.http.impl.client.InternalHttpClient

可以看到这个方法传入的还是HttpHost,也就是请求地址,但下面就通过determineRoute方法生成了一个HttpRoute,并且后续也是使用HttpRoute。

org.apache.http.impl.conn.DefaultRoutePlanner

可以看到默认情况下,路由中的地址就是主机地址。

org.apache.http.impl.execchain.MainClientExec

这里也是使用HttpRoute。

org.apache.http.impl.conn.PoolingHttpClientConnectionManager

这里又开始使用HttpHost。

org.apache.http.impl.conn.DefaultHttpClientConnectionOperator

这里会解析hostName,如果通过hostName能解析出多个IP地址,则依次使用这些IP尝试创建socket,只要有一个能创建成功,则停止尝试。

从上述代码中可以看到,是按路由地址创建连接池的,如果路由地址中的主机地址可以解析成多个IP地址时,只会使用第一个可用的IP地址。

一般都是通过域名访问其它服务,而域名一般可以解析出多个IP,而域名默认情况下就是路由主机地址,只能为其中一个IP建立连接,且能创建的最大连接数就是defaultMaxPerRoute的值。这样远远达不到maxTotal的值。

当然,有一种办法是直接使用域名解析出的多个IP访问其它服务,这样每个IP就是一个路由,最后创建的总连接数就可以达到maxTotal的值。但这样的最大弊端是域名解析出的IP一般是动态的,可能会不但变化,程序中写死IP是非常不灵活的。

那有没有两全其美的办法,既使用域名访问其它服务,又使用域名解析后的IP作为路由创建连接池,使用连接数创建到最大值。办法是有的,只要实现一个RoutePlanner就行。

java 复制代码
public class TestRoutePlanner implements RoutePlanner {

    private final Random random = new Random();

    public HttpRoute determineRoute(HttpHost host, HttpRequest reqt, HttpContext ctx) {

        InetAddress[] addrs = InetAddress.getAllByName(host.getHostnName());
        
        int idx = random.mextInt(addrs.length);
        String hostAddr = addrs[idx]getHostAddress();

        HttpHost newHost = new HttpHost(hostAddr, host.getPort(), host.getSchemeName());

        return new HttpRoute(newHost, null, false);
    }
}

然后将TestRoutePlanner添加到HttpClient中。

java 复制代码
		HttpClientBuilder httpClientBuilder = HttpClientBuilder.create() //
				.setConnectionManager(connectionManager) //
				.setDefaultRequestConfig(requestConfig) //
				.setRoutePlanner(new TestRoutePlanner())//
				.useSystemProperties();

上述TestRoutePlanner写的比较简单,性能也不太好,只是不演示功能而已,实际使用时还需要进一步改造。

相关推荐
小璐猪头1 分钟前
专为 Spring Boot 设计的 Elasticsearch 日志收集 Starter
java
hui函数5 分钟前
如何解决 pip install 编译报错 g++: command not found(缺少 C++ 编译器)问题
开发语言·c++·pip
Tisfy14 分钟前
网站访问耗时优化 - 从数十秒到几百毫秒的“零成本”优化过程
服务器·开发语言·性能优化·php·网站·建站
济61721 分钟前
嵌入式C语言(第一期)
c语言·开发语言
ps酷教程21 分钟前
HttpPostRequestDecoder源码浅析
java·http·netty
闲人编程22 分钟前
消息通知系统实现:构建高可用、可扩展的企业级通知服务
java·服务器·网络·python·消息队列·异步处理·分发器
XiaoHu020722 分钟前
Linux多线程(详细全解)
linux·运维·服务器·开发语言·c++·git
苏宸啊35 分钟前
C++(二)类和对象上篇
开发语言·c++
栈与堆42 分钟前
LeetCode-1-两数之和
java·数据结构·后端·python·算法·leetcode·rust
superman超哥1 小时前
双端迭代器(DoubleEndedIterator):Rust双向遍历的优雅实现
开发语言·后端·rust·双端迭代器·rust双向遍历