- 博客(3)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 修改hadoop的DBInputFormat类，实现一次读取多个数据库
原理：hadoop提供了DBInputFormat类读取关系型数据库的，它是把一张表分成若干个inputSplit作为map输入，需要定义一个类实现Writable, DBWritable接口，作为map方法的输入值参数，一条一条记录的读取表的信息。根据以上原理，如果要一次读取多个数据库的表，就要把每个库作为一个inputSplit，作为map的输入。做这里之前，必须清楚这个job执行的流程，下图
2014-07-10 16:55:42
320
原创 hadoop分布式下打包运行时报java.lang.RuntimeException: java.lang.ClassNotFoundException的原因
通过打包运行MapReduce程序的时候，当MapReduce
2014-07-10 12:29:20
1635
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人