hadoop
_小海_
这个作者很懒,什么都没留下…
展开
-
Kerberos 的Kprop服务无法启动
操作系统版本:SUSE12SP2做Kerberos数据同步时Kprop服务无法启动Kprop服务需要kprop.acl文件要在/etc/services里面增加一行:krb5_prop 754原创 2020-11-13 19:57:09 · 600 阅读 · 0 评论 -
Hadoop之为何不使用RAID
Hadoop之为何不使用RAID--http://www.cnblogs.com/Richardzhu/p/5315064.html转载 2017-09-11 15:08:37 · 410 阅读 · 0 评论 -
关于parquet
Parquet与ORC:高性能列式存储格式http://blog.csdn.net/yu616568/article/details/51868447Using Apache Parquet Data Files with CDHhttps://www.cloudera.com/documentation/enterprise/5-8-x/topics/cd转载 2017-02-09 17:22:23 · 865 阅读 · 0 评论 -
Hadoop YARN: 1/1 local-dirs are bad: /var/lib/hadoop-yarn/cache/yarn/nm-local-dir; 1/1 log-dirs are
Hadoop YARN: 1/1 local-dirs are bad: /var/lib/hadoop-yarn/cache/yarn/nm-local-dir; 1/1 log-dirs are bad: /var/log/hadoop-yarn/containers hdfs硬盘90% yarn unhealthy1/1 local-dirs ar转载 2017-02-07 12:12:36 · 4455 阅读 · 1 评论 -
yarn-site.xml
注意,配置这些参数前,应充分理解这几个参数的含义,以防止误配给集群带来的隐患。另外,这些参数均需要在yarn-site.xml中配置。1. ResourceManager相关配置参数(1) yarn.resourcemanager.address参数解释:ResourceManager 对客户端暴露的地址。客户端通过该地址向RM提交应用程序,杀死应用程序等。默转载 2017-02-07 11:44:30 · 788 阅读 · 0 评论 -
hadoop CDH
CDH 1、CDH简介CDH:全称Cloudera’s Distribution Including Apache Hadoop CDH版本衍化 hadoop是一个开源项目,所以很多公司在这个基础进行商业化,Cloudera对hadoop做了相应的改变。 Cloudera公司的发行版,我们将该版本称为CDH(Cloudera Distribution Hadoop)。转载 2017-02-07 11:57:16 · 32007 阅读 · 0 评论 -
离线安装Cloudera Manager 5和CDH5(最新版5.1.3) 完全教程
离线安装Cloudera Manager 5和CDH5(最新版5.1.3) 完全教程时间 2014-10-13 01:44:00 博客园-原创精华区原文 http://www.cnblogs.com/jasondan/p/4011153.html关于CDH和Cloudera ManagerCDH (Cloudera's Distribution, includi转载 2015-04-09 14:40:43 · 971 阅读 · 0 评论 -
Hadoop集群_Hadoop安装配置
1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 对于Had转载 2013-12-11 10:39:51 · 1252 阅读 · 0 评论 -
hadoop,hbase,hive安装全记录
转:http://blog.csdn.net/chengweipeng123/article/details/7174717操作系统:CentOS 5.5Hadoop:hadoop-0.20.203.0jdk1.7.0_01namenode主机名:master,namenode的IP:10.10.102.15datanode主机名:slave1,datanode的IP:转载 2013-12-11 10:43:20 · 975 阅读 · 0 评论 -
hadoop 2.0 详细配置教程
作者:杨鑫奇PS:文章有部分参考资料来自网上,并经过实践后写出,有什么问题欢迎大家联系我。update: 20130518 大家可以尝试下Ambari来配置Hadoop的相关环境快速的部署Hadoop,Hbase和Hive等并提供Ganglia和Nagios的监控功能,强烈推荐使用.http://www.cnblogs.com/scotoma/archive转载 2013-12-11 10:41:59 · 927 阅读 · 0 评论