Hadoop
文章平均质量分 94
Hadoop
itLaity
不断努力,不断提升!
展开
-
Hadoop入门教程
Hadoop入门教程生命无罪,健康万岁,我是laity分布式和集群的概念分布式:多台机器,每台机器上部署不同组件。集群:多台机器,每台机器上部署相同组件。Hadoop核心组件HDFS :分布式文件存储系统,用于解决海量数据存储YARN :集群资源管理和任务调度框架,用于解决资源任务调度MapReduce :分布式计算框架,用于解决海量数据计算。HDFS 的shell博客基础命令hadoop fs -ls file:/// # 操作本地文件系统hadoop fs -ls h原创 2022-05-16 10:35:02 · 3085 阅读 · 0 评论 -
HDFS的shell命令简介
一、HDFS的shell命令简介 我们都知道HDFS 是存取数据的分布式文件系统,那么对HDFS 的操作,就是文件系统的基本操作,比如文件的创建、修改、删除、修改权限等,文件夹的创建、删除、重命名等。对HDFS 的操作命令类似于lLinux 的shell 对文件的操作,如ls、mkdir、rm 等。我们在执行HDFS的shell操作的时候,一定要确定hadoop 是正常运行的,我们可以使用使用jps 命令确保看到各个hadoop 进程。我们可以执行命令hadoop fs,来查看HDFS原创 2022-05-13 12:20:04 · 6058 阅读 · 1 评论