伪分布式环境搭建

注意

  1. 配置分布式的前提条件

    1. jdk1.8
    2. ssh免密登录
    3. 关闭防火墙
  2. 如果访问不到webUI的几种处理情况

    1. windows或linux防火墙没有关闭
    2. 主机名与ip没有在hosts文件中映射(更容易出现在windows下)
    3. 浏览器不能使用IE或兼容模式
  3. 如果需要重新格式化

    1. 关闭服务
    2. 删除所有节点的dfs目录
    3. 重新格式化,重启服务

伪分布式环境搭建

  1. 下载安装包

  2. 解压缩

  3. 配置环境变量

    HADOOP_HOME=/home/bduser/modules/hadoop

    PATH= P A T H : {PATH}: PATH:{HADOOP_HOME}/bin:${HADOOP_HOME}/sbin

  4. 修改配置文件

    复制粘贴

    格式化

    hadoop/hdfs namenode -format

  5. 启动相应服务

    start-all.sh 启动全部服务

    start-dfs.sh 启动hdfs服务

    start-yarn.sh 启动yarn服务

  6. 正确执行

  7. 验证

    1. jps 查看五个服务都在
    2. webUI node101:50070
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
HBase 作为一种基于 Hadoop分布式数据库,它的分布式环境搭建也是基于 Hadoop分布式环境搭建的基础上进行的。下面是 HBase 分布式环境搭建的步骤: 1. 安装和配置 Hadoop Hadoop 的安装和配置可以参考 Hadoop 官方网站的文档。 2. 安装和配置 HBase 下载 HBase 安装包并解压缩,将解压后的文件夹移动到某个目录下,比如 /usr/local/hbase。 修改 HBase 配置文件 conf/hbase-site.xml,添加如下配置: ```xml <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://localhost:9000/hbase</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/local/hbase/zookeeper</value> </property> </configuration> ``` 其中,hbase.rootdir 是 HBase 存储数据的根目录,需要指定 HDFS 的地址;hbase.zookeeper.property.dataDir 是 ZooKeeper 存储数据的目录。 3. 启动 Hadoop 和 ZooKeeper 启动 Hadoop 和 ZooKeeper 服务: ```bash $ start-dfs.sh $ start-yarn.sh $ zkServer.sh start ``` 4. 启动 HBase 启动 HBase 服务: ```bash $ cd /usr/local/hbase $ ./bin/start-hbase.sh ``` 启动后,可以通过浏览器访问 http://localhost:16010/ 查看 HBase 的 Web 界面。 5. 使用 HBase 使用 HBase 可以通过命令行工具 hbase shell 或者编写 Java 应用程序来进行。以下是使用 hbase shell 的简单示例: ```bash $ hbase shell > create 'mytable', 'cf' > list > put 'mytable', 'row1', 'cf:col1', 'value1' > get 'mytable', 'row1' > scan 'mytable' > disable 'mytable' > drop 'mytable' > exit ``` 以上命令创建一个名为 mytable 的表,添加一条数据,查询数据,扫描整个表,禁用表和删除表。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值