大数据
文章平均质量分 68
小娴菜
啥子玩意儿嘛
展开
-
Oozie编译
Oozie编译参考oozie编译所需要的软件包及已安装软件jdk 1.8hadoop 2.7.5mysql 5.7apache-maven-3.6.3-bin.tar.gzext-2.2.zipoozie-4.1.0.tar.gzdoxia-core-1.0-alpha-9.2y.jardoxia-module-twiki-1.0-alpha-9.2y.jarpenta...原创 2020-04-30 11:51:09 · 386 阅读 · 0 评论 -
HDFS HA搭建
HDFS HA搭建官网配置超详细Hadoop HA高可用集群搭建及常见问题处理查询报java.net.UnknownHostException集群规划表主机名Java进程nn1QuorumPeerMain、journalnode、namenode、DFSZKFailoverControllernn2QuorumPeerMain、journalnode、nam...原创 2020-03-25 13:48:50 · 182 阅读 · 0 评论 -
CentOS7.6单机部署Tableau
Tableau部署至少使用8G内存,30G硬盘。安装Tableau 2018至少需要8G,否则会报错。分配8G使用的话会很卡必须使用普通用户才能安装成功安装Tableau# 安装Tableau rpm包sudo yum install tableau-server-2018-3-0.x86_64.rpm# 查看是否安装成功ls /opt初始化TSM脚本TSM即Tablea...原创 2020-03-25 13:41:40 · 540 阅读 · 0 评论 -
Spark SQL基础
Spark SQL基础程序主入口 SparkSessionSparkSession对象不仅为用户提供了创建DataFrame对象、读取外部数据源并转化为DataFrame对象以及执行sql查询的API,还负责记录着用户希望Spark应用如何在Spark集群运行的机制、调优参数,是Spark SQL的上下文环境,是运行的基础。val sparkSession = SparkSession ...原创 2020-01-09 11:56:12 · 234 阅读 · 0 评论 -
Hama的单机安装
Hama的单机安装Hama官方地址修改hama的配置文件hama-env.sh修改hama的配置文件hama-site.xml启动hama (在启动hama之前要启动hadoop)测试Hama官方地址http://www.apache.org/dyn/closer.cgi/hama修改hama的配置文件hama-env.shexport JAVA_HOME=/opt/jdk1.8.0_16...原创 2019-04-09 14:11:27 · 565 阅读 · 3 评论