![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
Brisy_
这个作者很懒,什么都没留下…
展开
-
Spark实验
Master、Worker,除此之外还要Hadoop的进程。原创 2024-05-16 16:21:38 · 224 阅读 · 0 评论 -
HBase分布式数据库
首先确认是否安装Hadoop,关闭顺序与启动顺序相反:先关闭HBase,之后再关闭Hadoop。7.检查JPS含有 HMaster、HRegionServer、HQuorumPeer 进程。, 需要放行 16919 端口。8.访问Web页面,原创 2024-04-18 20:42:06 · 775 阅读 · 4 评论 -
基于MapReduce词频统计
4.上传“in-自己姓名全拼.txt”到HDFS的/input路径下。任意输入英文内容,按下 Esc 键,输入 :wq 进行保存。1.安装路径/opt/hadoop,启动Hadoop。2.创建输入数据文件“in-自己姓名全拼.txt”原创 2024-04-13 19:22:31 · 355 阅读 · 1 评论 -
HDFS常用命令
从hdfs复制到本地:hdfs dfs -copyToLocal /hdfsdir/hdfs1.txt /root。从本地复制到hdfs:hdfs dfs -copyFromLocal /root/f1.txt /hdfsdir。从hdfs下载到本地:hdfs dfs -get /hdfsdir/hdfs1.txt /root。从本地上传到hdfs:hdfs dfs -put /root/f1.txt /hdfsdir。移动/改名文件:hdfs dfs -mv /hdfs1.txt /hdfsdir。原创 2024-04-13 17:49:44 · 205 阅读 · 1 评论 -
在阿里云轻量服务器中搭建Hadoop环境
注意事项:需在阿里云服务器实例安全组(防火墙)中放行8088、50070端口,以及可能需要关闭整个防火墙。原创 2024-04-13 17:46:04 · 450 阅读 · 0 评论