解决kubernetes中微服务pod之间调用失败报错connection refused的问题

现象：

从这里可以看到是当前服务在调用product service服务是出现了连接拒绝connection refused

走读一下原始代码：

可以看到请求是由FeignClient代理发出的，但问题在于为什么Feign请求的时候会产生connection refused错误？

上面的日志又没有给出详细信息。我们需要看到feign请求网址的完整信息。

解决办法：新建一个配置类

import feign.Logger; import org.springframework.context.annotation.Bean;

import org.springframework.context.annotation.Configuration;

@Configuration public class FeignConfig {

@Bean

Logger.Level feignLoggerLevel() {

return Logger.Level.FULL; // 设置Feign日志级别为FULL

}

}

然后把这个配置类写到@FeignClient注解里的configration里面

@FeignClient(name = "your-service", configuration = FeignConfig.class)

public interface YourServiceClient { // Feign客户端的方法定义 }

这样配置后，Feign将以Full日志级别打印详细的HTTP请求和响应信息，包括完整的URL

因为我的@FeignClient注解里面的configration里面已经有配置类了，所以我把上面的那个bean直接追加到那个配置类里面：

然后再来查看日志果然发现：feign请求的地址有问题：竟然请求到当前自身ip 127.0.0.1了，

难怪会连接拒绝。

2023-11-21 02:14:07.336 INFO 1 --- [oduct-service-1] c.n.l.DynamicServerListLoadBalancer : DynamicServerListLoadBalancer for client product-service initialized: DynamicServerListLoadBalancer:{NFLoadBalancer:name=product-service,current list of Servers=[127.0.0.1:8081],Load balancer stats=Zone stats: {defaultzone=[Zone:defaultzone; Instance count:1; Active connections count: 0; Circuit breaker tripped count: 0; Active connections per server: 0.0;]

},Server stats: [[Server:127.0.0.1:8081; Zone:defaultZone; Total Requests:0; Successive connection failure:0; Total blackout seconds:0; Last connection made:Thu Jan 01 00:00:00 GMT 1970; First connection made: Thu Jan 01 00:00:00 GMT 1970; Active Connections:0; total failure count in last (1000) msecs:0; average resp time:0.0; 90 percentile resp time:0.0; 95 percentile resp time:0.0; min resp time:0.0; max resp time:0.0; stddev resp time:0.0]

看了一下springboot配置文件

原来是ip-address设置在作怪，因为它主动上报eureka自身的ip地址为127.0.0.1, 那其他服务调用该服务时从eureka拿到的地址就会是127.0.0.1，从而向自身发起调用，这样必须会产生连接拒绝错误（因为你本来就是跨服务调用，自身怎么会有你需要的服务）

注意: 不要手动设置ip-address，而应该让Eureka自动获取。这样，服务将以实际的网络地址注册到Eureka，Feign在调用时将获得正确的服务地址

然后去掉这个ip-address配置以后，仍然报错：java.net.UnknownHostException: product-service-deploy-674d77cffd-4rj4m

2023-11-21 04:57:26.847 ERROR 1 --- [nio-8080-exec-1] o.a.c.c.C.[.[.[/].[dispatcherServlet] : Servlet.service() for servlet [dispatcherServlet] in co ntext with path [] threw exception [Request processing failed; nested exception is com.netflix.hystrix.exception.HystrixRuntimeException: ProductService Api#findProductsByCategory(Integer) failed and no fallback available.] with root cause

java.net.UnknownHostException: product-service-deploy-674d77cffd-4rj4m

这回看起来feign请求的时候没有请求ip , 但是解析到k8s的pod ip了。

为什么会这样？

使用下面的api查看一下product-service在eureka中注册的详细信息：

${eureka-IP}:port/eukeka/apps/$ {server-name}

像下面这样：这里可以很清晰的看到produc-service在eureka中的详细信息，

特别是hostName和ipAddr, 从上面的情况来看，应该是eureka返回给服务调用方的是被调用服务的hostName而不是ip

然后同时测试一下服务需求方是否能正常从k8s的内网ip ping通被调用服务，也就是测试服务之间的网络连通性。

可以看到两个服务之间网络联通正常，然后从下图可以看到在宿主机上也可以通过内网ip和端口访问到该服务。

问题还是出现在eureka在springboot的配置中

eureka的client注册到server时默认是使用hostname而不是ip,这就导致client在多台机器时，服务间相互调用时也会使用hostname进行调用，从而调用失败。

为解决这个问题，eureka必须配置prefer-ip-address: true, 要求优先使用ip地址向eureka注册。

那么最后调用方从eureka拿到的就是ip地址了而不是hostname.

为什么会这样？因为eureka源码就是这样定义的（EurekaInstanceConfigBean.class），如下所示

加上prefer-ip-address以后，再通过eureka api查询上述服务的信息，发现之前的hostName也变成了ip地址:

把上面的prefer-ip-address: true配置加上去以后，以为问题解决了，但是又报错如下：

大概意思请求失败，没有fallback降级服务，但是我明明有写降级服务啊：

后来发现原来是application没有配置熔断降级，加上去就可以了：

复制代码

feign:
  hystrix:
    enabled: true #启用熔断降级

最后问题终于解决，没再报错了。

总结一下解决办法：

springboot eureka配置中 不要手动设置ip-address，此配置必须去掉！

**2.**springboot eureka必须配置prefer-ip-address: true

3. 当feign调用报错信息不明时，应设置Feign日志级别为FULL，查看详细的服务调用信息，包括请求url等，这样有利于诊断故障