- 博客(2)
- 收藏
- 关注
原创 hadoop分布式环境搭建
文件_SUCCESS 表示处理成功,处理的结果存放在 part-r-00000 文件中,查看该文件。在每个 Slave 节点把 Master 节点复制的公钥复制到authorized_keys 文件。在 Master 节点把从 Slave 节点复制的公钥复制到 authorized_keys 文件。在 Master 节点把从 Slave 节点复制的公钥复制到 authorized_keys 文件。将 Master 节点的公钥 id_rsa.pub 复制到每个 Slave 点。
2024-04-25 13:38:36 919
原创 从零开始的spark学习
学习spark之前先了解hadoop是什么东西,以下是我收集的一些关于hadoop的资料Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。Spark主要由五部分组成:Spark CoreSpark Core 中提供了 Spark 最基础与最核心的功能,Spark 其他的功能如:Spark SQL,
2024-03-07 16:44:13 823
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人