八天学会hadoop (1) 数据同步 rpc

1 hadoop 下载hdfs文件到本地

拿到hdfs的输入流(把hdfs的文件搬运到内存)   拿到本地文件输出流(java)把内存搬运到本地文件

 

2 hadoop 数据同步的过程

元数据信息指的是文件的大小 名称 修改时间 地址 创建时间等等

edits 文件与fsimage文件合并在 secondary namenode里面

 

 

3 rpc 底层原理

 

   如图为两台服务器的controller service。controller service 各在一台服务器上，rpc调用需要一个中间接口 LoginServiceInterface  controller 所在服务器有个代理类proxy 实现了中间接口，调用login方法时被劫持，调用socket sendmsg方法  右边service服务器有个动态代理对象(真正调用Login方法还是impl对象本身)接受参数 返回结果。