![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
安装
文章平均质量分 91
cy19871228cy
这个作者很懒,什么都没留下…
展开
-
Hudi实战
Hudi 实战官网 :https://hudi.apache.org/docs/spark_quick-start-guide.html#setup在大数据平台 华为 FusionInght HD 6.5.1中使用 hudi 0.7.0 版本1 登录华为HD 客户端2 由于环境离线在只能使用离线的hudi和avro包进行试验 分别下载3个jar包3 由于我spark版本是2.3.2 有jar包冲突 先把spark libs里面的avro 包移走4 使用spark-shel原创 2021-03-26 11:11:09 · 1702 阅读 · 1 评论 -
cloudera manager 安装文档
1 ssh互访(可以不配置)2 时间同步服务NTP配置1.1 在一台主机上编辑配置文件/etc/ntp.confvim /etc/ntp.conf去掉一下两行前面的#号#server 127.127.1.0 # local clock#fudge 127.127.1.0 stratum 101.2 在其他主机上分别编辑配置文件/etc/ntp.confvim /etc/ntp.conf...原创 2018-02-05 17:30:32 · 331 阅读 · 0 评论 -
sparkR 安装
SparkR的安装和配置1 集成在CLOUDERA MANAGER里由于cdh集成的spark2不支持sparkR所以要手动将sparkR的相关内容放入spark2的目录下1 下载已经编译过的spark2包wget https://d3kbcqa49mib13.cloudfront.net/spark-2.1.0-bin-hadoop2.7.tgz2 安装sparkR解原创 2018-02-05 18:14:33 · 400 阅读 · 1 评论 -
presto on redis
Presto on redis PRESTO的安装和配置1 安装1 下载presto包(1)wget https://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.179/presto-server-0.179.tar.gz2 上传presto包上传到服务器将(1)上传至10.118.242.72原创 2018-02-05 18:19:11 · 3142 阅读 · 0 评论