- 博客(5)
- 收藏
- 关注
原创 flink1.11.3编译集成cdh6.2.1
编译准备环境: jdk-1.8 maven-3.8 下载并解压maven的安装包 配置maven环境变量: vim /etc/profile 加入环境配置: export MAVEN_HOME=/opt/app/apache-maven-3.8.1 export PATH=$MAVEN_HOME/bin:$PATH 配置生效: source /etc/profile 查看maven是否配置成功,命令: mvn --version flink-1.11.3下载 https://flink.apa
2021-04-26 18:33:28 450
原创 cdh hue + sparksql(spark thriftserver)
cdh hue + sparksql(spark thriftserver) 参考hue:https://docs.gethue.com/administrator/configuration/connectors/ 1、由于cdh自带spark版本不支持spark-thrift服务,所以需要在官网下载自己所需的spark版本(http://spark.apache.org/downloads.html) 2、下载并解压后配置环境变量(jdk 安装不再赘述) vim /etc/profile export
2021-02-09 17:07:39 1600 2
原创 解决HUE使用sparksql查询无法显示元数据的问题
解决HUE使用sparksql查询无法显示元数据的问题 解决方法: 1、首先你的hive肯定要能用,我们就是将spark的元数据查询请求转换为hive的元数据请求 2、操作步骤: cd /opt/cloudera/parcels/CDH/lib/hue/build/static/desktop/js vi apiHelper.js ApiHelper.prototype.fetchSourceMetadata = function (options) { var self = this; v
2021-02-09 17:03:08 782 1
原创 CDH6.2.0环境下安装Tez
CDH6.2.0环境下安装Tez 参考: https://blog.csdn.net/weixin_43941899/article/details/105787688 https://my.oschina.net/shea1992/blog/3107972 一、安装环境 1、Linux版本: CentOS 7.4 2、Hadoop版本:3.0.0+cdh6.2.1 3、Hive版本:2.1.1+cdh6.2.1 4、JDK版本:JDK1.8 5、Maven版本:apache-maven-3.6.3(链接:
2021-02-09 16:56:30 543
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人