聊聊reactor异步线程的变量传递

序

本文主要研究下reactor异步线程的变量传递

threadlocal的问题

在传统的请求/应答同步模式中，使用threadlocal来传递上下文变量是非常方便的，可以省得在每个方法参数添加公用的变量，比如当前登录用户。但是业务方法可能使用了async或者在其他线程池中异步执行，这个时候threadlocal的作用就失效了。

这个时候的解决办法就是采取propagation模式，即在同步线程与异步线程衔接处传播这个变量。

TaskDecorator

比如spring就提供了TaskDecorator，通过实现这个接口，可以自己控制传播那些变量。例如：

class MdcTaskDecorator implements TaskDecorator {
 @Overridepublic Runnable decorate(Runnable runnable) {// Right now: Web thread context !// (Grab the current thread MDC data)Map<String, String> contextMap = MDC.getCopyOfContextMap();return () -> {try {// Right now: @Async thread context !// (Restore the Web thread context's MDC data)MDC.setContextMap(contextMap);runnable.run();} finally {MDC.clear();}};}
} 

这里注意在finally里头clear

配置这个taskDecorator

@EnableAsync
@Configuration
public class AsyncConfig implements AsyncConfigurer {
 @Overridepublic Executor getAsyncExecutor() {ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();executor.setTaskDecorator(new MdcTaskDecorator());executor.initialize();return executor;}

} 

完整实例详见Spring 4.3: Using a TaskDecorator to copy MDC data to @Async threads

Reactor Context

spring5引入webflux，其底层是基于reactor，那么reactor如何进行上下文变量的传播呢？官方提供了Context对象来替代threadlocal。

其特性如下：

• 类似map的kv操作，比如put(Object key, Object value),putAll(Context), hasKey(Object key)
• immutable，即同一个key，后面put不会覆盖
• 提供getOrDefault，getOrEmpty方法
• Context与作用链上的每个Subscriber绑定
• 通过subscriberContext(Context)来访问
• Context的作用是自底向上

实例

设置及读取

 @Testpublic void testSubscriberContext(){String key = "message";Mono<String> r = Mono.just("Hello").flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key))).subscriberContext(ctx -> ctx.put(key, "World"));StepVerifier.create(r).expectNext("Hello World").verifyComplete();} 

这里从最底部的subscriberContext设置message值为World，然后flatMap里头通过subscriberContext来访问。

自底向上

 @Testpublic void testContextSequence(){String key = "message";Mono<String> r = Mono.just("Hello")//NOTE 这个subscriberContext设置的太高了.subscriberContext(ctx -> ctx.put(key, "World")).flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.getOrDefault(key, "Stranger")));StepVerifier.create(r).expectNext("Hello Stranger").verifyComplete();} 

由于这个例子的subscriberContext设置的太高了，不能作用在flatMap里头的Mono.subscriberContext()

不可变

 @Testpublic void testContextImmutable(){String key = "message";Mono<String> r = Mono.subscriberContext().map( ctx -> ctx.put(key, "Hello"))//这里返回了一个新的，因此上面的设置失效了.flatMap( ctx -> Mono.subscriberContext()).map( ctx -> ctx.getOrDefault(key,"Default"));StepVerifier.create(r).expectNext("Default").verifyComplete();} 

subscriberContext永远返回一个新的

多个连续的subscriberContext

 @Testpublic void testReadOrder(){String key = "message";Mono<String> r = Mono.just("Hello").flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key))).subscriberContext(ctx -> ctx.put(key, "Reactor")).subscriberContext(ctx -> ctx.put(key, "World"));StepVerifier.create(r).expectNext("Hello Reactor").verifyComplete();} 

operator只会读取离它最近的一个context

flatMap间的subscriberContext

 @Testpublic void testContextBetweenFlatMap(){String key = "message";Mono<String> r = Mono.just("Hello").flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key))).subscriberContext(ctx -> ctx.put(key, "Reactor")).flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key))).subscriberContext(ctx -> ctx.put(key, "World"));StepVerifier.create(r).expectNext("Hello Reactor World").verifyComplete();} 

flatMap读取离它最近的context

flatMap中的subscriberContext

 @Testpublic void testContextInFlatMap(){String key = "message";Mono<String> r =Mono.just("Hello").flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key))).flatMap( s -> Mono.subscriberContext().map( ctx -> s + " " + ctx.get(key)).subscriberContext(ctx -> ctx.put(key, "Reactor"))).subscriberContext(ctx -> ctx.put(key, "World"));StepVerifier.create(r).expectNext("Hello World Reactor").verifyComplete();} 

这里第一个flatMap无法读取第二个flatMap内部的context

小结

reactor通过提供Context来实现了类似同步线程threadlocal的功能，非常强大，值得好好琢磨。

doc

• TaskDecorator
• Spring 4.3: Using a TaskDecorator to copy MDC data to @Async threads
• HOW TO PASS CONTEXT IN STANDARD WAY - WITHOUT THREADLOCAL
• Spring Security Context Propagation with @Async
• 如何在async线程中访问RequestContextHolder
• Context Aware Java Executor and Spring’s @Async
• 8.8.1. The Context API学习网络安全技术的方法无非三种:

第一种是报网络安全专业，现在叫网络空间安全专业，主要专业课程:程序设计、计算机组成原理原理、数据结构、操作系统原理、数据库系统、 计算机网络、人工智能、自然语言处理、社会计算、网络安全法律法规、网络安全、内容安全、数字取证、机器学习，多媒体技术，信息检索、舆情分析等。

第二种是自学，就是在网上找资源、找教程，或者是想办法认识一-些大佬，抱紧大腿，不过这种方法很耗时间，而且学习没有规划，可能很长一段时间感觉自己没有进步，容易劝退。

如果你对网络安全入门感兴趣，那么你需要的话可以点击这里👉网络安全重磅福利：入门&进阶全套282G学习资源包免费分享！

第三种就是去找培训。

接下来，我会教你零基础入门快速入门上手网络安全。

网络安全入门到底是先学编程还是先学计算机基础？这是一个争议比较大的问题，有的人会建议先学编程，而有的人会建议先学计算机基础，其实这都是要学的。而且这些对学习网络安全来说非常重要。但是对于完全零基础的人来说又或者急于转行的人来说，学习编程或者计算机基础对他们来说都有一定的难度，并且花费时间太长。

第一阶段：基础准备 4周~6周

这个阶段是所有准备进入安全行业必学的部分，俗话说：基础不劳，地动山摇

第二阶段：web渗透

学习基础 时间：1周 ~ 2周：

① 了解基本概念：（SQL注入、XSS、上传、CSRF、一句话木马、等）为之后的WEB渗透测试打下基础。
② 查看一些论坛的一些Web渗透，学一学案例的思路，每一个站点都不一样，所以思路是主要的。
③ 学会提问的艺术，如果遇到不懂得要善于提问。

配置渗透环境 时间：3周 ~ 4周：

① 了解渗透测试常用的工具，例如（AWVS、SQLMAP、NMAP、BURP、中国菜刀等）。
② 下载这些工具无后门版本并且安装到计算机上。
③ 了解这些工具的使用场景，懂得基本的使用，推荐在Google上查找。

渗透实战操作 时间：约6周：

① 在网上搜索渗透实战案例，深入了解SQL注入、文件上传、解析漏洞等在实战中的使用。
② 自己搭建漏洞环境测试，推荐DWVA，SQLi-labs，Upload-labs，bWAPP。
③ 懂得渗透测试的阶段，每一个阶段需要做那些动作：例如PTES渗透测试执行标准。
④ 深入研究手工SQL注入，寻找绕过waf的方法，制作自己的脚本。
⑤ 研究文件上传的原理，如何进行截断、双重后缀欺骗(IIS、PHP)、解析漏洞利用（IIS、Nignix、Apache）等，参照：上传攻击框架。
⑥ 了解XSS形成原理和种类，在DWVA中进行实践，使用一个含有XSS漏洞的cms，安装安全狗等进行测试。
⑦ 了解一句话木马，并尝试编写过狗一句话。
⑧ 研究在Windows和Linux下的提升权限，Google关键词：提权

以上就是入门阶段

第三阶段：进阶

已经入门并且找到工作之后又该怎么进阶？详情看下图

给新手小白的入门建议：
新手入门学习最好还是从视频入手进行学习，视频的浅显易懂相比起晦涩的文字而言更容易吸收，这里我给大家准备了一套网络安全从入门到精通的视频学习资料包免费领取哦！

如果你对网络安全入门感兴趣，那么你需要的话可以点击这里👉网络安全重磅福利：入门&进阶全套282G学习资源包免费分享！