分布式计算
NO23412号菜狗
这个作者很懒,什么都没留下…
展开
-
hadoop 安装 是否需要 格式化 数据节点
在设置伪集群或完整集群时,我们是否需要格式化数据节点以安装HDFS文件系统,或者只需要格式化namenode。 我之所以这么问是因为,我在许多博客上都读到过,HDFS将数据按顺序存储在硬盘上,它是一个抽象层,将数据存储在大块上,而不是主机文件系统提供的默认块大小存储中。 如果我们不格式化datanode,那么HDFS的强大功能就折腾了。 最佳答案 格式化和安装硬盘驱动器与格式化HDFS没有直接关系。从概念上讲,“格式化”的思想是相同的。但是,这两个任务是完全分开的,没有直接的关系。 hadoo.原创 2020-11-21 14:15:42 · 785 阅读 · 0 评论 -
面试中的消息队列问题
https://blog.csdn.net/qq_35190492/article/details/103153444原创 2020-02-22 08:12:20 · 448 阅读 · 0 评论 -
Ubuntu 19 安装配置 Zookeeper 集群
一. 资源准备 三个节点, IP和主机名对应如下 192.168.17.130 masternode 192.168.17.131 worknode1 192.168.17.132 worknode2 二. 安装配置 Step1:下载Zookeeper 本例:zookeeper-3.4.6.tar.gz URL...原创 2019-11-29 09:52:50 · 131 阅读 · 0 评论 -
ubuntu19 搭建ubuntu 完全分布式
首先下下载ubtunut 可以使用sudo nautilus 进入根目录安装 下栽好后 配置hadoop环境变量: 1 $ sudo vim /etc/profile 在末尾添加spark环境变量: 1 2 3 # Hadoop export HADOOP_HOME=/opt/hadoop expor...原创 2019-10-24 11:00:45 · 646 阅读 · 0 评论