hadoop中hdfs通讯原理

1、对hdfs的操作方式:hadoop fs fs *****

hadoop fs -ls /   查看hdfs的跟目录下的内容

hadoop fs -lsr /  递归hdfs的根目录下的内容

hadoop fs mkdir  /d1 在hdfs上创建文件夹

        hadoop fs -put   xxx       ******   把linux数据从xxxxx上次到hdfs目录******下

        hadoop fs -get    xxxx    ******   把数据从hdfs下载到linux特定路径

        hadoop fs -text  查看hdfs中的文件

        hadoop fs -rm  删除hdfs中的文件

        hadoop fs  -rmr   删除hdfs中的文件夹

2、HDFS的datanode在存储数据时,如果原始文件大小>64mb,按照64mb切分,反之直接占用64mb

3、RPC(remote procedure call)

      不同的java进程间的对象方法的调用

      一方称作服务端(server),一方称作客户端(client),

      server端提供对象,供客户端调用的。被调用的对象的方法的执行发生在server

      RPC是hadoop框架运行的基础,

4、通过rpc小例子获得的认识?

服务端通过的对象是一个接口,接口extends VersionedProtocal

  客户端能过的对象中的方法必须位于对象的接口中,

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值