Linux
JopenC
(⁎˃ᆺ˂)
展开
-
Spark实验2更新版(自用)
在master节点上执行如下命令:/opt/hadoop/sbin/start-all.sh //启动hadoop集群/opt/spark/sbin/start-all.sh //启动spark集群1.在master的/opt目录下新建file1.txt数据文件直接复制file1.txt:1,1768,50,1552,1218,600,2113,2239,788,2424,310...原创 2019-10-25 00:22:22 · 428 阅读 · 0 评论 -
RDD编程初级实践
请根据给定的实验数据Data01.txt,在spark-shell中通过编程来计算以下内容首先使用xftp将Data01.txt(某大学计算机系的成绩数据集)上传至master节点的/opt目录下所有节点使用hadoop用户登录su hadoop //切换hadoop用户在master节点上分别启动hadoop集群和spark集群/opt/hadoop/sbin/start-all.s...原创 2019-10-17 22:24:17 · 6392 阅读 · 0 评论 -
Linux目录结构说明
dev (devices)用于存放设备文件lib (library)存放文件系统中的程序运行所需要的共享库及内核模块mnt (mount)系统管理员安装临时文件系统的安装点boot 存放用于系统引导时使用的各种文件tmp (temporary)用于存放各种临时文件var (variable)用于存放运行时需要改变数据的文件bin (binaries)存放二进制可执行文件sbin ...原创 2019-08-01 16:12:28 · 220 阅读 · 0 评论 -
Linux文件权限说明及修改
Linux文件权限格式描述r 可读权限, w可写权限, x可执行权限(可二进制表示)第1位:文件类型(d 指目录,- 指普通文件 ,I 指链接文件)第2~4位:所属用户权限,用u(user)表示第5~7位:所属组权限,用g(group)表示第8~10位:其它用户权限,用o(other)表示相关修改命令说明:#修改文件或目录的权限,可用chmod命令c...原创 2019-08-01 18:21:15 · 304 阅读 · 0 评论