- 博客(5)
- 收藏
- 关注
原创 Spark开发环境的搭建与配置(基于Linux)
目录一、部署环境安装说明二、Spark安装1.Spark下载2.解压Spark安装包3.配置环境4.安装scala(scala要在同一目录下)一、部署环境安装说明部署环境VMware+Ubuntu18+jdk8+Hadoop3.3.1关于hadoop的安装和scala的安装参考:hadoop的安装:(5条消息) Hadoop开发环境的搭建与配置(基于Linux)_Drajor的博客-CSDN博客scala的安装:(5条消息) Linux虚拟机...
2022-04-21 16:08:11 6371
原创 关于如何解决hadoop jps时没有datanode
在输入jps命令后,可能会出现无法启动DataNode的情况,如图。可能原因1:可能因为多次格式化NameNode会重新生成新的ClusterId(集群ID),而原来的DataNode内data文件下的VERSION文件内的ClusterId还是原来的ClusterId,所以就会出现与NameNode的ClusterId不匹配。解决方法:找到存放VERSION的路径我的是:data/hadoop/hdfs/name/current/和data/hadoop/hdfs/data
2022-04-21 14:21:07 13924 4
原创 Linux虚拟机上的Scala安装
1.安装JAVAScala程序需要运行在JVM(Java虚拟机)上,因此,在安装Scala之前,需要在Linux系统中安装Java,然后,再安装ScalaJDK的安装已经放在Linux虚拟机基础安装与配置_Drajor的博客-CSDN博客里了可以自行查看2.安装Scala2.1Scala的下载Scala的下载可以自行访问Download | The Scala Programming Language (scala-lang.org)进行下载,这里下载的版本是2.11.8也可选择其他..
2022-03-25 10:20:29 5642
原创 Hadoop开发环境的搭建与配置(基于Linux)
目录一、部署环境安装说明二、Hadoop安装2.配置环境变量3.配置Hadoop相关文件hadoop-env.sh配置hdfs-site.xml配置4、创建相关文件夹5、验证一、部署环境安装说明部署环境 Docker+Ubuntu18+jdk8二、Hadoop安装1.Hadoop下载Hadoop可以从官网(Apache Hadoop) 下载。访问国外的链接网速较慢,我们改从清华大学开源软件镜像下载。 下载地址 https://mirrors.tuna.
2021-10-21 16:18:28 2830
原创 python 绘制一个四瓣花图
利用turtle库绘制一个四瓣花图形import turtle as tfor i in range(4): t.seth(90*(i+1)) t.circle(200, 90) t.seth(-90+i*90) t.circle(200, 90)t.done()
2021-05-09 22:26:03 16039 5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人