cdh
文章平均质量分 65
AuroraPetard
这个作者很懒,什么都没留下…
展开
-
Cloudera Manager(CDH5)内部结构、功能包括配置文件、目录位置等 转
Cloudera Manager(CDH5)内部结构、功能包括配置文件、目录位置等from https://blog.csdn.net/levy_cui/article/details/515079501. 相关目录 /var/log/cloudera-scm-installer : 安装日志目录。/var/log/* : 相关日志文件(相关服务的及CM的)。/usr/share/cm...原创 2018-11-30 19:36:58 · 112 阅读 · 0 评论 -
cdh版 hive hive-site.xml 位置
真心感觉cdh不好用,乱糟糟的找了半天没发现在哪里,/etc里面的那个配置是thirft的配置不能用,需要mysql为元数据的那个配置偶然间发现在登录cm 左下角点进去hive 左下角 Hive metaStore Server 点进去 roletype 下面的随便点击一个进去在上面的Process里面记录了hive-site.xml mysql 为元数据库 密码为加密坑爹的...原创 2018-12-07 19:36:40 · 6479 阅读 · 0 评论 -
spark2.0 读取mysql 并加载到hive分区表 cdh
首先建立一个maven 项目 然后 add framework scala 添加scala支持将hive的相关配置放到项目的resources 目录下,core-site.xml hdfs-site.xml hive-site.xml如果是cdh的话,配置会有很多,可以自己简化一下,只保留 核心配置,比如说 namenode地址有的配置端口为8020 有的为9000 注意下端口,当初一...原创 2018-12-07 20:21:21 · 884 阅读 · 0 评论 -
CM搭建
cdh需要jdk 1.7 并且需要放到 /usr/java 目录下没有自己创建 ,因为 启动程序会自动去此目录查找 java -version chmod 775 /usr/java/jdk/ 4.9 安装ntp apt-get install ntp 4.10 启动ntp service ntp start 4.11 设置开机启动...原创 2018-12-10 22:25:20 · 643 阅读 · 0 评论 -
cdh 查看各组件的版本
像hdp查看版本就比较容易点,直接打开add service即添加服务就能看到以前安装组件的版本而cdh就没有那么简单了需要通过 allhost 主机 所有主机 随便点击进去一个主机 工具栏 组件即可查看...原创 2019-08-31 16:44:59 · 563 阅读 · 0 评论