InheritThreadLocal引发的生产bug

之所以使用可继承的threadlocal,想必也很容易猜到,原来是需要在父子线程中传递上下文。

场景

线上AB测试

技术实施

  1. 应用注册时设置A/B状态到注册中心的metaData
  2. 扩展ribbon的负载均衡策略,当前应用上下文中的A/B状态符合注册中心的服务metaData时即可匹配路由
  3. 在应用的filter中增加AB上下文状态设置
  4. zuul网关代理应用接口,同时在请求头中透传A/B状态

集成测试

风风火火进行了大半月,没暴露任何故障,想必是没进行压测导致没提前暴露问题。

翻车现场

B环境的数据跑到了A正式环境。通过一顿操作,定位到是在hystrix线程隔离策略中使用了线程池,一旦池化那么InheritThreadLocal只会在线程池初始化线程时拷贝父线程的ThreadLocal,从而导致线程复用时不再会拷贝threadlocal的A/B状态。为了快速修复该bug,果断对线上hystrix的隔离调整为信号量。

private void init(ThreadGroup g, Runnable target, String name,
                      long stackSize, AccessControlContext acc,
                      boolean inheritThreadLocals) {
        ........
        //关键copy父线程threadlocal的代码
        if (inheritThreadLocals && parent.inheritableThreadLocals != null)
            this.inheritableThreadLocals =
                ThreadLocal.createInheritedMap(parent.inheritableThreadLocals);
        /* Stash the specified stack size in case the VM cares */
        this.stackSize = stackSize;

        /* Set thread ID */
        tid = nextThreadID();
    }

怎么避免

1.使用阿里开源的的threadlocal和线程池来重写ribbon做自定义路由的上下文以及hystrix的线程池。

2.使用spring的TaskDecorator来装饰线程(推荐移步这里

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值