Hadoop
文章平均质量分 66
liema2000
这个作者很懒,什么都没留下…
展开
-
Hadoop0.20.2在Linux X64下的分布式配置和使用
Hadoop0.20.2在Linux X64下的分布式配置和使用 2013年3月 郭运凯目 录介绍...21 集群网络环境介绍及快速部署...22 SSH无密码验证配置...62.1配置所有节点之间SSH无密码验证...63 JDK安装和Java环境变量配置...103.1 安装 JDK 1.6.103.2 Java环境变量配置...114 Had原创 2013-03-11 19:51:35 · 1894 阅读 · 3 评论 -
Hadoop2.2.0 部署spark 1.0
Hadoop2.2.0 部署spark 1.0 2014年7月郭运凯目 录介绍...11 集群网络环境介绍及快速部署...22 SSH无密码验证配置...62.1配置所有节点之间SSH无密码验证...63 JDK安装和Java环境变量配置...103.1 安装 JDK 1.7.103.2 Java环境变量配置...104原创 2014-07-16 22:43:24 · 1682 阅读 · 0 评论 -
hive 打开调试模式
打开调试模式:hive -hiveconf hive.root.logger=DEBUG,console原创 2013-08-07 21:01:53 · 5709 阅读 · 0 评论 -
DataNode2: java.io.IOException: Could not find my address: datanode2 in list of ZooKeeper quorum ser
问题描述:基于cloudera的cdh3u6的版本,搭建hadoop平台1. hadoop-0.20.2-cdh3u6.tar.gz;2. hbase-0.90.6-cdh3u6.tar.gz;3. hive-0.7.1-cdh3u6.tar.gz;4. sqoop-1.3.0-cdh3u6.tar.gz;5. zookee原创 2013-06-07 19:17:50 · 3665 阅读 · 3 评论 -
hadoop 用户创建data目录时 DataNode无法启动
场景:Centos 6.4 X64 hadoop 0.20.205配置文件hdfs-site.xml dfs.name.dir/usr/local/hadoop/hdfs/namedfs.data.dir/usr/local/hadoop/hdfs/datadfs.replication1原创 2013-04-10 21:36:04 · 4845 阅读 · 1 评论 -
spark 1.0 编译支持 hadoop 2.4.0
北京时间5月30日20点多。Spark 1.0.0终于发布了:Spark 1.0.0 released根据官网描述,Spark 1.0.0支持SQL编写:Spark SQL Programming Guide个人觉得这个功能对Hive的市场的影响很小,但对Shark冲击很大,就像win7和winXP的关系,自相残杀嘛? 这么着急的发布1.x 版是商业行为还是货真价实的体现,让我们拭目以原创 2014-06-08 13:32:07 · 814 阅读 · 0 评论