2014年11月_KingBoxing

12月 11月 09月 08月 07月 06月 05月 04月 03月 02月 01月

转载 Impala不能查询到Hive中新增加的表

使用Cloudera Manager部署安装的CDH和Impala，Hive中新增加的表，impala中查询不到，其原因是/etc/impala/conf下面没有hadoop和hive相关的配置文件：将hadooop-core.xml,hdfs-site.xml,hive-site.xml拷贝到conf下，重启服务即可。

2014-11-20 19:31:45 5394 1

转载 HADOOP HDFS BALANCER介绍及经验总结

1.集群执行balancer命令，依旧不平衡的原因是什么？该如何解决？2.尽量不在NameNode上执行start-balancer.sh的原因是什么？集群平衡介绍Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况，比如集群中添加新的数据节点。当HDFS出现不平衡状况的时候，将引发很多问题，比如MR程序无法很好地利用本地计算的优势，机器之间无法达到更

2014-11-19 14:49:30 2280

转载 CDH5安装LZO压缩机制

目录[-]一、Parcel 部署步骤二、lzo parcels本地化三、修改配置四、验证一、Parcel 部署步骤 1 下载: 首先需要下载 Parcel。下载完成后，Parcel 将驻留在 Cloudera Manager 主机的本地目录中。 2 分配: Parcel 下载后，将分配到群集中的所有主机上并解压缩。 3

2014-11-12 14:32:26 3027 2

原创 hadoop不同版本的集群数据迁移：distcp

公司以前的hadoop集群是1.X，hadoop distcp hftp://10.4.2.41:50070/user/hive/warehouse/tables/ufanode_nginx_pv /user/hive/warehouse/tables/ufanode_nginx_pv

2014-11-10 20:33:09 8944

原创 Cloudera Manager5安装问题记录

Loaded plugins: fastestmirror, securityLoading mirror speeds from cached hostfilehttp://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5/repodata/repomd.xml: [Errno 14] PYCURL ERROR 7 - "Failed to co

2014-11-04 15:27:18 4294 1

转载 apache服务器的安装

毅然决然的放弃了xampp，搞起apache，还挺复杂，直接安装httpd-2.4.4，会先后报出1、configure: error: APR not found. Please read the documentation.2、configure: error: APR-util not found. Please read the documentation3、con

2014-11-04 13:23:00 678 1