![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 61
SHADOW_DIUDIU
这个作者很懒,什么都没留下…
展开
-
hadoop 、hbase 、hive 版本对应关系
hadoop1.2+hbase0.95.0+hive0.11.0会产生hbase+hive的不兼容,创建hive+hbase的关联表就会报pair对异常。hadoop1.2+hbase0.94.9+hive0.10.0 没问题,解决了上个版本的不兼容问题。www.aboutyun.comhadoop-1.0.3+hive-0.9.0+hbase-0.92.0兼容hadoop2.原创 2014-09-19 14:35:00 · 2903 阅读 · 0 评论 -
hadoop2伪分布简易配置
1、解压hadoop-2.4.0略2、配置HADOOP_HOME配置HADOOP_HOME和JAVA_HOME如下图略3、修改配置文件编辑文件core-site.xml1、创建目录/usr/local/hadoop-2.4.0/tmp2、修改配置文件/usr/local/hadoop-2.4.0/etc/hadoop/core-site.xmlhadoo原创 2014-09-12 16:05:34 · 381 阅读 · 0 评论 -
错误:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using built
错误内容[root@localhost hadoop-2.4.0]# hdfs dfs -ls/Java HotSpot(TM) 64-Bit Server VM warning:You have loaded library /usr/local/hadoop-2.4.0/lib/native/libhadoop.so.1.0.0which might have disabled sta原创 2014-09-12 17:23:26 · 1967 阅读 · 0 评论 -
org.apache.hadoop.security.AccessControlException:Permission denied:user=Administrator,access=WRITE
org.apache.hadoop.security.AccessControlException:Permission denied:user=Administrator,access=WRITE,inode="tmp":root:supergroup:rwxr-xr-x 。 这个错误有些蹊跷,因为我已经在map/reduce locations中配置了用户名是root,不知道它为什么原创 2014-09-23 17:00:40 · 2426 阅读 · 0 评论 -
hbase 与 java API
java类HBase数据模型HBaseAdmin数据库(DataBase)HBaseConfigurationHTable表(Table)HTableDescriptor列族(Column Family)Put列修饰符(Column Qualifier)GetScanner原创 2014-10-21 11:29:55 · 431 阅读 · 0 评论 -
从Hadoop框架与MapReduce模式中谈海量数据处理(含淘宝技术架构)
从hadoop框架与MapReduce模式中谈海量数据处理前言 几周前,当我最初听到,以致后来初次接触Hadoop与MapReduce这两个东西,我便稍显兴奋,觉得它们很是神秘,而神秘的东西常能勾起我的兴趣,在看过介绍它们的文章或论文之后,觉得Hadoop是一项富有趣味和挑战性的技术,且它还牵扯到了一个我更加感兴趣的话题:海量数据处理。 由此,最近凡是空闲时,便在看“Had转载 2014-11-27 14:39:02 · 1006 阅读 · 0 评论