netty开篇

最近一直在研究分布式大数据处理，涉及了hadoop、spark、kafka、zookeeper、flume等系统框架、学习的很不系统、对系统内进程之间调度和底层处理没有深刻认识，所以打算从底层的视角分析这些系统有哪些分布式系统的共性需要解决。分布式系统通常采用Master-Slave模式，进程之间的数据通信就是其中核心要处理的问题。spark和kafka采用了akka通信框架。而hadoop和zookeeper采用了netty通信框架。要想自己实现一种通信框架是非常困难的。netty作为成熟的通信模型十分优雅的封装了底层复杂的通信细节。深入了解netty框架应该对于理解系统之间的消息通信十分有帮助。