CDH集群安装
文章平均质量分 91
大大大大大大太阳
这个作者很懒,什么都没留下…
展开
-
Hive MR小文件优化、性能调优、大小数据量级执行优化
不仅如此Hive的SQL还可以通过用户定义的函数(UDF),用户定义的聚合(UDAF)和用户定义的表函数(UDTF)进行扩展。(几个函数之间的区别)Hive中不仅可以使用逗号和制表符分隔值(CSV / TSV)文本文件,还可以使用Sequence File、RC、ORC、Parquet (知道这几种存储格式的区别),当然Hive还可以通过用户来自定义自己的存储格式,基本上前面说的到的几种格式完全够了。Hive旨在最大限度地提高可伸缩性(通过向Hadoop集群动态添加更多机器扩展),性能,原创 2019-02-27 17:31:26 · 1954 阅读 · 1 评论 -
Kerberos 集成到 CDH6
开始安装一、安装之前的注意点关于AES-256加密:对于使用 centos5. 6及以上的系统,默认使用 AES-256 来加密的。这就需要集群中的所有节点上安装 http://stackoverflow.com/questions/18754243/securityexception-even-after-replacing-crypto-policy-jars要下载对应jdk版本的j...原创 2018-12-13 16:21:28 · 467 阅读 · 0 评论 -
大数据集群:CDH 6.0.X 完整版 安装
Cloudera Enterprise 6.0.x 安装步骤前沿一CDH6新功能介绍二:下面开始进行CDH6安装前的准备工作:1、配置主机名和hosts解析(所有节点)2、关闭防火墙3、关闭SELinux4、添加定时任务5、禁用透明大页面压缩6、优化交换分区三:安装 CM 和 CDH1、配置 Cloudera Manager 仓库 yum源(所有节点)2、rpm -ivh mysql-commun...原创 2018-12-13 12:48:21 · 3993 阅读 · 0 评论