Hadoop数据类型和序列化

32 篇文章 0 订阅

Hadoop中的java基本类型都是通过实现Writeable接口:BooleanWirteable,ByteWirteable,IntWirteable,

                    VintWirteable,FloatWirteable,LongWirteable,DoubleWirteable。

Hadoop序列化机制和Java的不同,java序列化是不断创建对象,Hadoop将对象序列化到流中,用户可以复用对象,这样减少了Java对象的分配和回收,提高了效率。

序列化(serialization):把结构化的对象转化为字节流,便于在网络上传输或写到磁盘进行永久存储。

反序列化(Deserization):把字节流转化为结构化对象

Hadoop序列化的特点与作用:

     紧凑:高效的使用存储空间

     快速:读写数据的额外开销小

     可扩展:可透明地读取老格式的数据

     互操作:支持多语言的交互

      ----------------------------------------------

     序列化在分布式环境中的两大作用:进程间通信,永久存储

      Hadoop节点通信

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值