Linux
文章平均质量分 79
辅猪之王
这个作者很懒,什么都没留下…
展开
-
centos7大数据集群搭建-hadoop集群搭建大全
centos7大数据集群搭建转载地址https://www.jianshu.com/p/ddb868bd97cd前置条件有起码三台虚拟机,我有四台,且各本机名和ip地址明确vi /etc/hosts,每台机都配,localhost对应即可192.168.43.53 localhost192.168.43.53 mynode192.168.43.122 node1192.168.43....原创 2019-10-29 09:53:40 · 822 阅读 · 0 评论 -
IDEA连接HIVE,踩坑日志-Failed initialising database.
今天使用idea本地连接Linux的hive数据库遇到了问题,代码如下:def main(args: Array[String]): Unit = {val sparkConf = new SparkConf().setAppName(“adver”).setMaster(“local[*]”)val sparkSession = SparkSession.builder().config(...原创 2019-10-25 11:51:01 · 1808 阅读 · 0 评论 -
在Linux上部署Spark集群
Spark集群部署方法一://spark安装1 解压缩/usr/local/app2/spark目录下tar -zxvf spark-2.3.1-bin-hadoop2.6.tgzmv spark-2.3.1-bin-hadoop2.6 spark2 环境变量,都需要配置export SPARK_HOME=/usr/local/app2/spark/sparkexport PATH=...原创 2019-10-14 10:36:39 · 518 阅读 · 0 评论 -
初识ELK
jdk1.8的安装要点vi etc/profile打开配置文件修改i进入修改模式,在里面粘贴如下语句,路径为解压后的存放路径 # This is java jdk1.8.0.11 environment variable configuration export JAVA_HOME=/home/baba/Desktop/Java/jdk1.8.0_11 export PATH=$JAVA_...原创 2019-09-06 13:17:50 · 93 阅读 · 0 评论 -
Linux初学者如何安装jdk,tomcat,mysql和svn
1 查看Linux SSH远程连接是否开启ps -ef | grep ssh service ssh start 开启ssh2 查看ip地址ifconfig 前三级应相同3.关闭防火墙service iptables stop 方法一,如果不行,方法二( why? :系统服务都用systemctl命令来开启service,它是CentOS7的服务管理中主要的工具,融合了之前serv...原创 2019-09-06 13:32:44 · 150 阅读 · 0 评论 -
sqoop 从hive中导出数据到mysql遇到的错误及解决方法
以下是sqoop语句:./sqoop export –connect jdbc:mysql://localhost:3306/newtext –username root --password “root” –table emp –fields-terminated-by ‘\t’ –export-dir /user/hive/warehouse/bt88.db/emp1 -m 1...原创 2019-10-07 21:21:39 · 4304 阅读 · 2 评论