hdfs
20150414
这个作者很懒,什么都没留下…
展开
-
java操作hdfs java.lang.NoClassDefFoundError: org/apache/hadoop/fs/CanUnbuffer
环境:hdfs 2.7.7pom:<dependency><groupId>org.apache.hadoop</groupId><artifactId>hadoop-hdfs</artifactId><version>2.7.7</version></dependency>...原创 2019-09-17 10:41:56 · 2891 阅读 · 1 评论 -
BulkLoad从hdfs导入hbase中数据总结
背景由于新需求需要新建hbase表,将hdfs中给定的目录下的文件导入到hbase表中,一种格式的文件(多种格式可能需要合并吧,目前没有这个需求,但是也可以分多次导入到hbase中吧,除非rowkey的构成需要多个文件,目前没有这种需求)。下面总结一下,写这个工具的过程和遇到的一些坑。1.调研有什么样的方式导入网上查了有很多种方式,比如数据少可以直接读取插入,或者bulkload,...原创 2019-09-20 18:45:38 · 567 阅读 · 0 评论