![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 74
苏苏与阿言
一生醉心学术,无暇于外物;虽朝闻道,但夕不可以死。愿世界和平
展开
-
Ubuntu安装HBase
0. 前序HBase数据库的运行,基于Hadoop系统,包括HDFS、YARN在内的组件,因此在安装HBase之前,Hadoop必须已经安装完成,且集群网络等已配置完成。安装方式详见:Ubuntu安装Hadoophttps://blog.csdn.net/weixin_40901068/article/details/121883498?spm=1001.2014.3001.55011. 下载分发安装包# wget 命令下载 hbase 安装包wget http://archive.ap原创 2022-02-28 13:17:44 · 2262 阅读 · 0 评论 -
Ubuntu安装Hadoop,添加新的DataNode结点
0. 前置当新的DataNode结点进入系统时,需安装Hadoop系统。注意新创建的结点的用户名,需与其它结点相同(即集群中所有机器系统中用户名均一致),方便秘钥分发。参见:Ubuntu安装Hadoop,并使用Python3调用https://blog.csdn.net/weixin_40901068/article/details/121883498?spm=1001.2014.3001.55011. 配置网络首先,需确保新节点IP地址,与所有的现存集群中的计算机能够ping通。以原创 2022-02-25 18:09:37 · 1262 阅读 · 0 评论 -
Ubuntu安装Hadoop,并使用Python3调用
前言使用各类包版本:包名版本Ubuntu20.04.3-adm64Hadoop3.3.1JAVAopenjdk-16-headlessPython3.9.5(miniconda 4.11.0)ViirtualBox(虚拟机)6.1.30 r148432 (Qt 5.6.2)1. Ubuntu下载来源网站兰州大学开源社区下载地址https://mirror.lzu.edu.cn/ubuntu-releases/20.04.3/ubuntu原创 2021-12-12 14:07:09 · 3449 阅读 · 0 评论 -
Hadoop部署(一) Ubantu Java JDK安装
Hadoop是存储大数据的常用框架,很多大数据处理的新架构例如Spark等,下层文件存储也是依赖于Hadoop组件HDFS的。Hadoop文件存储系统上限受制于主节点的内存大小。安装Hadoop需要有一个主节点和多个从节点,此处我们使用一个主节点和两个从节点,用于模拟HDFS默认的三份文件备份。本节前提:假设已经有三台已经安装好Ubantu系统的主机,或者是虚拟机等设备。Java JDK安装Hadoop应该是基于Java安装的(此处我也不是很确定,网络上能搜到的教程都是说先按照JDK再装Hadoo原创 2021-11-11 16:38:46 · 1592 阅读 · 0 评论