- 博客(5)
- 收藏
- 关注
RSS订阅原创 Scala安装和初级编程实践
编写Scala程序实现如下功能：读取一个文本文件，对文本内容按照行内容倒置，但是每一行的内容不变。编写Scala程序实现如下功能：读取一个文本文件，对文本内容按照行内容倒置，但是每一行的内容不变。解决方案（列出遇到的问题和解决办法，列出没有解决的问题）：无。在Linux系统中安装Scala 2.11.8。在Linux系统中安装Scala 2.11.8。（备注：相关实验过程可以截图放入实验报告）实验环境：Scala 2.11.8。
2023-10-23 22:38:13
153
原创 Spark环境搭建及程序编译运行
假设之前在Linux系统中已经按照伪分布式模式在机器上安装了Hadoop，请在此基础上，按照Local模式安装Spark，并做相关配置，使得Spark可以顺利访问HDFS。之前在Linux系统中已经按照伪分布式模式在机器上安装了Hadoop，在此基础上，按照Local模式安装Spark，并做相关配置，使得Spark可以顺利访问HDFS。请使用Local模式启动进入spark-shell环境，并书写几条Scala语句进行测试，然后退出spark-shell环境。2.4 通过spark-submit运行程序。
2023-10-23 22:32:47
336
原创 HDFS常用Shell命令
1. 使用vim编辑器，在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件myLocalFile.txt，里面可以随意输入一些单词；2.把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下；5. 把HDFS中的myLocalFile.txt文件下载到本地文件系统中的“/home/hadoop/下载/”这个目录下；3.在HDFS的用户目录下创建一个名称为input的子目录；到本地文件系统查看下载下来的文件。
2023-10-23 22:30:33
111
原创 Linux系统安装、常用命令以及相关软件用法
在本机安装虚拟机软件Vmware Workstation pro 16软件；然后在虚拟机软件Vmware workstation pro 16上安装Ubuntu22.04.3操作系统。（3）切换到当前登录Linux系统的用户的自己的主文件夹。（1）切换到目录“/usr/local”（30）查看JAVA_HOME变量的值。（2）切换到当前目录的上一级目录、
2023-10-23 22:21:27
211
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人