- 博客(2)
- 收藏
- 关注
RSS订阅转载 hadoop configuration
参考 Hadoop Configuration 源码详解 使用Hadoop Configuration一些需要注意的细节 hadoop3.0 api 介绍 使用Configuration类的对象去初始化一个任务，在整个任务执行过程中，作为参数的携带者，任务执行过程中所需要的所有参数都从该对象中获取，是一个配置文件管理类。 设置属性方式 hadoop jar $jar \ ${classna...
2019-03-29 13:32:11
748
原创 Mapper中获取分片信息
场景 输入路径中含有重要信息，需要在map的时候进行处理。 场合 只有一个Mapper，每个mapper只处理一个输入文件 protected void setup(Context context) throws IOException, InterruptedException { Path path = ((FileSplit) context.getInputSplit()).get...
2019-03-25 14:18:55
232
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人