同时使用注解和 xml 的方式引用 dubbo 服务产生的异常问题排查实战

于 2023-05-03 23:53:51 发布
阅读量995 收藏
点赞数 1
分类专栏： 线上实战 文章标签： dubbo ReconnectTimer
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaoduanayu/article/details/130478996
版权

文章目录

一、现象

使用 nacos 作注册中心的线上 dubbo 消费端应用每隔 1 分钟就会抛出以下异常（为使描述简单化，文章中使用本地 demo 来复现），该异常表示无法连接到 172.17.0.1:20881 这台提供端

21:11:49.843 [dubbo-client-idleCheck-thread-1] ERROR org.apache.dubbo.remoting.exchange.support.header.ReconnectTimerTask.doTask(51) -  [DUBBO] Fail to connect to HeaderExchangeClient [channel=org.apache.dubbo.remoting.transport.netty4.NettyClient [172.17.0.1:0 -> /172.17.0.1:20881]], dubbo version: 2.7.3, current host: 172.17.0.1
org.apache.dubbo.remoting.RemotingException: client(url: dubbo://172.17.0.1:20881/com.example.dubbo.HelloService?anyhost=true&application=dubbo-consumer-app&bean.name=com.example.dubbo.HelloService&category=providers&check=false&codec=dubbo&deprecated=false&dubbo=2.0.2&dynamic=true&generic=false&heartbeat=60000&interface=com.example.dubbo.HelloService&lazy=false&methods=sayHello&path=com.example.dubbo.HelloService&pid=56029&protocol=dubbo&register=true&register.ip=172.17.0.1&release=2.7.3&remote.application=dubbo-provider-app&server=netty4&side=consumer&sticky=false&timestamp=1683113373687) failed to connect to server /172.17.0.1:20881, error message is:拒绝连接: /172.17.0.1:20881
	at org.apache.dubbo.remoting.transport.netty4.NettyClient.doConnect(NettyClient.java:166)
	at org.apache.dubbo.remoting.transport.AbstractClient.connect(AbstractClient.java:190)
	at org.apache.dubbo.remoting.transport.AbstractClient.reconnect(AbstractClient.java:246)
	at org.apache.dubbo.remoting.exchange.support.header.HeaderExchangeClient.reconnect(HeaderExchangeClient.java:155)
	at org.apache.dubbo.remoting.exchange.support.header.ReconnectTimerTask.doTask(ReconnectTimerTask.java:49)
	at org.apache.dubbo.remoting.exchange.support.header.AbstractTimerTask.run(AbstractTimerTask.java:87)
	at org.apache.dubbo.common.timer.HashedWheelTimer$HashedWheelTimeout.expire(HashedWheelTimer.java:648)
	at org.apache.dubbo.common.timer.HashedWheelTimer$HashedWheelBucket.expireTimeouts(HashedWheelTimer.java:727)
	at org.apache.dubbo.common.timer.HashedWheelTimer$Worker.run(HashedWheelTimer.java:449)
	at java.lang.Thread.run(Thread.java:748)
Caused by: io.netty.channel.AbstractChannel$AnnotatedConnectException: 拒绝连接: /172.17.0.1:20881
	at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method)
	at sun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:717)
	at io.netty.channel.socket.nio.NioSocketChannel.doFinishConnect(NioSocketChannel.java:325)
	at io.netty.channel.nio.AbstractNioChannel$AbstractNioUnsafe.finishConnect(AbstractNioChannel.java:340)
	at io.netty.channel.nio.NioEventLoop.processSelectedKey(NioEventLoop.java:635)
	at io.netty.channel.nio.NioEventLoop.processSelectedKeysOptimized(NioEventLoop.java:582)
	at io.netty.channel.nio.NioEventLoop.processSelectedKeys(NioEventLoop.java:499)
	at io.netty.channel.nio.NioEventLoop.run(NioEventLoop.java:461)
	at io.netty.util.concurrent.SingleThreadEventExecutor$5.run(SingleThreadEventExecutor.java:884)
	at io.netty.util.concurrent.FastThreadLocalRunnable.run(FastThreadLocalRunnable.java:30)
	... 1 more
Caused by: java.net.ConnectException: 拒绝连接
	... 11 more

二、问题排查

经过确认，172.17.0.1:20881 这台提供端确实已经下线，所以才会无法连接。

通过查询 dubbo 源码得知，ReconnectTimerTask 是一个定时任务，其实例被 DubboInvoker 实例持有，当 DubboInvoker 对应的消费端服务与对端的提供端服务断开连接时，该定时任务就会定时重连提供端。正常情况下不会出现这种异常，因为提供端下线以后，会通过注册中心通知到消费端，消费端对应的 DubboInvoker 实例会被销毁，从而重连定时任务也会被销毁。

找到出问题的 HelloService 在应用中的使用方式，发现既有通过 @Reference 注解的方式使用，又有通过 xml 配置的方式使用。首先，将 arthas 连接到出问题的消费端应用，然后执行以下命令

ognl '#context=@org.apache.dubbo.config.spring.extension.SpringExtensionFactory@CONTEXTS.iterator.next, #context.getBean("helloService").handler.invoker.directory.urlInvokerMap'

得到结果为

在这里插入图片描述

发现 HelloService 服务的 RegistryDirectory 实例中确实还存在已经下线的提供端，说明提供端下线后该消费端没有感知到

接着，使用 arthas 监控看看消费端的服务监听 notify 方法是否生效，运行以下命令

watch org.apache.dubbo.registry.support.FailbackRegistry notify params

然后，将 20880 那台服务提供端也下线，看看 watch 命令的输出，如下所示

在这里插入图片描述

说明服务下线通知功能是正常的，不过这里的 RegistryDirectory 实例和上面使用 ognl 表达式查询的 RegistryDirectory 实例不是同一个，使用 ognl 表达式查询的实例如下

在这里插入图片描述

说明 HelloService 服务被 refer 了两次，也就是生成了两个服务引用，但是只有一个引用的服务监听生效。

三、结论

联系到 HelloService 在应用中有注解和 xml 两种引用方式，调试一遍服务引用的创建过程，发现在 NacosRegistry 中有这么一段服务订阅代码

在这里插入图片描述

这段代码的意思是，当相同的服务引用被创建了两次，只有第一次创建的引用会订阅服务。所以通过注解和 xml 两种方式创建 HelloService 服务引用时，会导致其中一个引用不会订阅服务变更，导致无法感知提供端下线，就会出现不断重连提供端的现象。

四、解决方案

应用中应当禁止同时使用注解和 xml 的方式来引用 dubbo 服务。

尐葮阿譽
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
dubbo多种形式配置详解(xml，注解，配置类，外部化配置等)
super1223的博客
07-16 3143
目录dubbo使用xml配置服务提供者搭建配置服务消费者搭建配置dubbo使用注解配置服务提供者搭建服务消费者搭建dubbo注解实现方法粒度配置dubbo编写配置类注入配置dubbo使用外部化配置与结合方式配置dubbo外部化配置dubbo注解配置与xml配置结合使用 dubbo使用xml配置 在搭建了dubbo管理平台和zookeeper注册中心之后就可以用分布式的思想来构建我们的项目了。 一般分布式项目由多个服务提供者组成，并且有不同的服务消费者去调用接口，服务消费者可以调用多个服务提供者，服务消费者可
springboot整合dubbo的使用介绍
04-14
4. 使用日志监控Dubbo的服务调用情况，便于问题排查。 以上就是关于SpringBoot整合Dubbo的详细使用介绍，希望对你的开发工作有所帮助。通过这个整合，你可以充分利用SpringBoot的便利性和Dubbo的强大服务治理能力，...
springboot-dubbo整合的两种实现方式(properties和xml方式)
09-09
springboot-dubbo整合的两种实现方式(properties和xml方式)，还有一种@Configuration注解方式没有进行实现，麻烦，尤其到后期进行一些dubbo服务的配置管理不太直观，所以建议使用xml方式，而且spring-dubbo工程转成springboot-dubbo工程中，使用xml时最简洁的
利用springboot+dubbo，构建分布式微服务，全程注解开发
02-24
随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。说起Dubbo，相信大家都不会陌生！阿里巴巴公司开源的一个高性能优秀的服务框架，可以使得应用可通过高性能的RPC实现服务的输出和输入功能，同时可以和Spring框架无缝集成。Dubbo架构图节点角色说明：Provider：暴露服务的服务提供方Consumer：调用远程服务的服务消费方Registry：服务注册与发现的注册中心Monitor：统计服务的调用次数和调用时间的监控中心Container：服务运行容器今天，我们以一个用户选择商品下订单这
Spring Boot 中基于注解和xml使用 dubbo
程序员备忘录
12-12 606
1. 基于注解 1.1. provider 配置信息 application.yml spring: dubbo: server: true registry: zookeeper://127.0.0.1:2181 application: name: dubbo-provider server: port: 8089 pom.xml <d...
dubbo整合spring（xml方式和注解方式）结合zookeeper
qq_45968950的博客
03-24 2785
建立一个Maven项目，在这个Maven项目下创建两个子模板（服务者、消费者） XML方式： 服务者： 1.引入依赖： <dependencies> <dependency> <groupId>org.projectlombok</groupId> <artifactId>lombok</artifactId> <version>1.18.12</version
dubbo超时机制源码浅析
to_create的博客
06-11 535
环境 dubbo版本：2.7.8 超时机制 dubbo超时分为客户端超时和服务端超时 源码分析 HashedWheelTimer HashedWheelTimer是一个计时器。主要的数据结构是一个HashedWheelBucket数组，类似于哈希表（下文称作wheel）。 在dubbo源码中，有2个地方用到了HashedWheelTimer，分别在DefaultFuture类和HeaderExchangeClient类中，分别对应dubbo-future-timeout和dubbo-client-idle
org.apache.dubbo.remoting.RemotingException: client(url: dubbo://192.168.51.100:20880)问题解决
yihang250的博客
12-11 1万+
问题：项目启动的时候突然出现：org.apache.dubbo.remoting.RemotingException: client(url: dubbo://192.168.51.100:20880)这个问题，我发现这个ip根本不是我电脑的ip,我通过终端查询ip为192.168.51.162这个ip给我查询的不符合 解决办法1：在启动配置里面输入启动参数将ip改为你实际的ip就可以解决 解决办法2： 在yml文件或者properties写你的ip但是不要提交，服务器上没有出现这个问题 你也可以通过xml
dubbo捕获自定义异常_dubbo异常捕获_dubbo异常_自定义异常_捕捉异常_
10-01
Dubbo 提供了强大的异常处理机制，使得服务提供者能够向消费者传递自定义异常，从而帮助消费者更好地理解和处理服务调用中的错误情况。本文将深入探讨如何在 Dubbo 中捕获自定义异常，以及相关的最佳实践。 1. **...
dubbo使用测试
03-20
在集成Dubbo时，我们通常会利用Spring的依赖注入（DI）和面向切面编程（AOP）能力，结合Dubbo的注解或XML配置，实现服务的声明式管理。例如，使用`@Service`注解标记服务实现类，用`@Reference`注解引用远程服务。 ...
dubbo上传文件+oss上传文件服务.zip
05-09
在IT行业中，分布式服务框架Dubbo和对象存储服务OSS（Object Storage Service）是两种非常重要的技术。本项目结合了这两个技术，实现了文件的本地上传以及通过Dubbo接口将文件发送到远程服务，并最终存储在OSS上。...
org.apache.dubbo.remoting.RemotingException client(url dubbo192.168.51.10020880)问题解决
m0_67402341的博客
04-07 4683
问题：项目启动的时候突然出现：org.apache.dubbo.remoting.RemotingException: client(url: dubbo://192.168.51.100:20880)这个问题，我发现这个ip根本不是我电脑的ip,我通过终端查询ip为192.168.51.162这个ip给我查询的不符合 解决办法1：在启动配置里面输入启动参数将ip改为你实际的ip就可以解决 解决办法2： 在yml文件或者properties写你的ip但是不要提交，服务器上没有出现这个问题 你也可以通过xml
dubbo-无法找到提供者问题（一）
m0_54850825的博客
08-14 3033
然后我们定位下 服务端的 ip 获取方式，因为RegistryProtocol是开始zk注册的入口，我们直接看下 org.apache.dubbo.registry.integration.RegistryProtocol#export。我们看下 url中的refer中的register.ip的存储时机的代码，毫无疑问 在org.apache.dubbo.config.ReferenceConfig中。此处我们找到了问题的根源，当前我们的mac环境的hostname是篡改为了虚拟的，...
【Spring Cloud Alibaba】（五）Dubbo启动报错？一直重连报错？你值得学习的是排查问题的方法
天罡gg的专栏
02-28 5786
书接上文，关于Dubbo，真心好用，真心强大！但是人红是非多，偶尔还能听到关于Dubbo的各种坑的说法。比如，消费方启动报错：Failed to check the status of the service xxx. No provider available for the service。。。再比如，消费方启动成功后，但一直与提供方重连报错：Fail to connect to HeaderExchangeClient。。。你真的以为这是Dubbo的坑吗?当你遇到技术问题时你会怎么做?
Dubbo 2.7.X版本升级后的问题
weixin_45614626的博客
12-19 881
dubbo升级版本后出现的问题
编码踩坑——dubbo异常“Service not found“
娜娜米的博客
05-25 9645
本篇介绍dubbo异常——“ Caused by: java.util.concurrent.ExecutionException: org.apache.dubbo.remoting.RemotingException: Fail to decode request due to: java.lang.IllegalArgumentException: Service not found:xxx ”的解决方法；
dubbo调用 Caused by: com.alibaba.dubbo.remoting.RemotingException 异常解决方法
热门推荐
企业数字化转型服务提供商
10-30 5万+
Caused by: com.alibaba.dubbo.remoting.RemotingException: message can not send, because channel is closed . url:dubbo://192.168.199.170:20883/com.coracle.dms.service.DmsChannelContactsService?anyhost=t...
MongoDB的Linux安装、基本操作、可视化、实验源码与报告文档
最新发布
07-10
MongoDB的Linux安装 在Linux上安装MongoDB，通常可以通过包管理器（如apt-get、yum等）或从MongoDB官网下载压缩包进行手动安装。以下是通过包管理器安装MongoDB的简要步骤（以Ubuntu为例）： 更新系统： 打开终端，使用sudo apt-get update命令更新系统包列表。 安装MongoDB： 使用sudo apt-get install -y mongodb命令安装MongoDB。这将自动处理依赖关系，并安装MongoDB服务器。 启动MongoDB服务： 安装完成后，可以使用sudo systemctl start mongod命令启动MongoDB服务。 验证安装： 使用mongo命令连接到MongoDB shell，如果能够成功连接并显示MongoDB的shell提示符，则表示MongoDB已成功安装并正在运行。 注意：以上步骤是基于Ubuntu系统的示例。对于其他Linux发行版，安装命令可能有所不同。此外，也可以从MongoDB官网下载.tgz压缩包进行手动安装，具体步骤包括下载、解压、配置环境变量、创建数据存储目录等。 M
使用dubbo注解方式暴露接口
05-14
要使用Dubbo注解的方式暴露接口，需要按照以下步骤进行： 1. 在Dubbo配置文件中，添加`<dubbo:annotation package="com.example.service"/>`，指定需要扫描的包名。 2. 在需要暴露的接口上添加`@Service`注解，该注解来自Dubbo。 3. 在Dubbo配置文件中，添加`<dubbo:protocol name="dubbo" port="20880"/>`，指定Dubbo所使用的协议和端口。 4. 启动Dubbo服务。 下面是一个示例代码： 1. 服务接口 ```java public interface HelloService { String sayHello(String name); } ``` 2. 服务实现类 ```java @Service public class HelloServiceImpl implements HelloService { public String sayHello(String name) { return "Hello, " + name; } } ``` 3. Dubbo配置文件 ```xml <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:dubbo="http://dubbo.apache.org/schema/dubbo" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd http://dubbo.apache.org/schema/dubbo http://dubbo.apache.org/schema/dubbo/dubbo.xsd"> <!-- 指定需要扫描的包名 --> <dubbo:annotation package="com.example.service"/> <!-- 指定Dubbo所使用的协议和端口 --> <dubbo:protocol name="dubbo" port="20880"/> <!-- 暴露服务 --> <bean id="helloService" class="com.example.service.impl.HelloServiceImpl"/> </beans> ``` 4. 启动Dubbo服务 ```java public class DubboProvider { public static void main(String[] args) throws Exception { ClassPathXmlApplicationContext context = new ClassPathXmlApplicationContext("classpath:dubbo-provider.xml"); context.start(); System.in.read(); } } ``` 启动成功后，可以使用Dubbo提供的工具Dubbo Admin来查看已经暴露的服务。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值