- 博客(1)
- 收藏
- 关注
RSS订阅原创 MapReduce心得170802
最近在调试mapreduce中使用avro的输入输出格式，这个轻量级的数据格式还是比较方便的，在数据的处理中可以把数据定义为对象来进行处理，同时数据类的生成也只需要定义好avsc的配置文件即可（具体的可以参照apache的官网上的内容）。 遇到的问题还是不少的： 1.读取avro格式的文件失败，报了nullpointer的错误。 参看了mr的日志发现没有进入map进行数据的分割和处理，仔细检
2017-08-02 19:46:11
314
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人