文章目的
CDP DC7.0.3是Cloudera与Hortonworks合并后,第一个融合CDH和HDP所有组件的on-premise版本,CDP Data Center主要由Cloudera Runtime构成,Cloudera Runtime由超过35个开源项目组成,当然CDP Data Center还包括其它功能如管理功能Cloudera Manager,Key Management,专业支持等。 说直白一点就是CDH与HDP的结合体(目前处在内测版本,不适用生产)
基础环境配置
与之前CDH6.X没什么区别
注意,各节点的root账户密码需要保持一致 ,无需自己安装JDK
CM安装
依然与CDH6没什么区别
CDH安装
本次为web页面傻瓜式安装,因此我在安装的时候并没有安装JDK,而是在傻瓜式操作中选中自带的cloudera JDK也不多说了
我只是想说一下我遇到一些列坑
坑
坑1:1.hive server2 无法启动
原因 jar包冲突导致 slf4j-log4j12-1.7.25.jar与log4j-slf4j-impl-2.10.0.jar jar包冲突
解决方式: 在hive server2 所在节点的//opt/cloudera/parcels/CDH-7.0.3-1.cdh7.0.3.p0.1635019/jars/目录下,将log4j-slf4j-impl-2.10.0.jar给屏蔽掉
为什么不屏蔽另外一个jarn呢?另外一个JAR后续的HBase 还会用到的
坑2:ranger Ranger Tagsync 无法启动问题
我不知道是我手贱勾中了这个选项还是系统默认就勾中了
解决方式:ranger.service.https.attrib.ssl.enabled 配置设置为false,反正去掉这个就可以启动
(个人感觉ranger的坑特别多,不建议安装,还是使用sentry吧)
3.impala 启动时报空指针问题(impala与ranger集成问题)
上面说了,ranger问题
解决方式:在impala服务范围中将ranger选项设置为false
4.hue web页面无hive查询
莫名其妙的就没了,好像要在DAS里查询,but,DAS需要hive on tez,我配置的是hive on spark
暂未解决
5.Atlas web页面无法登陆问题
暂未解决
6.hue与hbase集成问题
这个之前的CDH6就有,我写过的,可以自己去看一下
内测版本还会有更多的坑等着我们的
参考
- https://blog.csdn.net/Hadoop_SC/article/details/103328839
- https://blog.csdn.net/TXBSW/article/details/84648269
- https://docs.cloudera.com/cdpdc/7.0/index.html