记一次dubbo调用的奇怪异常SOF

最新推荐文章于 2024-04-23 07:01:16 发布

大神起步

最新推荐文章于 2024-04-23 07:01:16 发布

阅读量796

点赞数

本文链接：https://blog.csdn.net/G1248019684/article/details/116012189

版权

记一次dubbo调用的奇怪异常

以前更多的使用公司内部的框架，对dubbo不怎么熟悉。

服务升级时，dubbo调用偶尔会产生调用失败，Caused by:SOF异常

经过多次和服务方沟通，服务方均表示服务方未发现任何异常，在服务方日志中也确实没有发现任何异常，排查时就先排除了服务方可能。

根据Caused by:SOF FastJson异常,首先想到的是fastjson的循环引用导致的SOF bug，但排查发现Fastjson是1.2.69，又检查了服务方的fastjosn是1.2.73，考虑是fastjson问题，故首先尝试了升级调用方的fastjson看是否能够解决，发现不可以。

再继续排查，有几个比较难以理解的点影响排查

dubbo选择的是Hessian序列化协议，怎么会是fastjson SOF?
服务端为什么会没有任何异常提示？
异常堆栈中为什么没有任何和fastjson有关系的上下文？
为什么会偶尔发生？
发生异常的一直是同一个接口服务？

经过各种排查，发现服务端确实正常，服务方正常返回了结果；调用方和服务方线程数等资源均没有明显升高，调用方引用的api包和服务方也吻合；在本地使用相同的参数反序列化也完成正常；

咨询对dubbo较为熟悉的同学，也没得到有效的反馈，尝试撸dubbo源码,发现Hessian反序列化中确实没有fastjson影子

排查陷入了困境。

异常提示：

[ERROR] msg:methodName Exception, request is:{xxxxxxx}||exception=com.alibaba.dubbo.rpc.RpcException: Failed to invoke the method methodName in the service xxxxxserviceName. Tried 1 times of the providers [ip] from the registry registryip on the consumer consumerip using the dubbo version xxx. Last error is: null

at com.alibaba.dubbo.rpc.cluster.support.FailoverClusterInvoker.doInvoke(FailoverClusterInvoker.java:111)

at com.alibaba.dubbo.rpc.cluster.support.AbstractClusterInvoker.invoke(AbstractClusterInvoker.java:244)

at com.alibaba.dubbo.rpc.cluster.support.wrapper.MockClusterInvoker.invoke(MockClusterInvoker.java:75)

at com.alibaba.dubbo.rpc.proxy.InvokerInvocationHandler.invoke(InvokerInvocationHandler.java:52)

at com.alibaba.dubbo.common.bytecode.proxy5.fetchAllTravelChannels(proxy5.java)

xxxxxxx......

at sun.reflect.GeneratedMethodAccessor447.invoke(Unknown Source)

at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

at java.lang.reflect.Method.invoke(Method.java:498)

at org.springframework.aop.aspectj.AbstractAspectJAdvice.invokeAdviceMethodWithGivenArgs(AbstractAspectJAdvice.java:644)

at org.springframework.aop.aspectj.AbstractAspectJAdvice.invokeAdviceMethod(AbstractAspectJAdvice.java:633)

at org.springframework.aop.aspectj.AspectJAroundAdvice.invoke(AspectJAroundAdvice.java:70)

at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:175)

at org.springframework.aop.interceptor.ExposeInvocationInterceptor.invoke(ExposeInvocationInterceptor.java:93)

at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:186)

at org.springframework.aop.framework.CglibAopProxy$DynamicAdvisedInterceptor.intercept(CglibAopProxy.java:688

at com.alibaba.dubbo.common.bytecode.Wrapper9.invokeMethod(Wrapper9.java)

at com.alibaba.dubbo.rpc.proxy.javassist.JavassistProxyFactory$1.doInvoke(JavassistProxyFactory.java:47)

at com.alibaba.dubbo.rpc.proxy.AbstractProxyInvoker.invoke(AbstractProxyInvoker.java:76)

at com.alibaba.dubbo.config.invoker.DelegateProviderMetaDataInvoker.invoke(DelegateProviderMetaDataInvoker.java:52)

at com.alibaba.dubbo.rpc.protocol.InvokerWrapper.invoke(InvokerWrapper.java:56)