hadoop集群format后，hadoop fs -ls /结果为空的分析过程

最新推荐文章于 2021-04-24 17:17:18 发布
最新推荐文章于 2021-04-24 17:17:18 发布
阅读量2.1k 收藏
点赞数
分类专栏： hive 文章标签： hive hadoop hdfs
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/rock718love/article/details/89923485
版权
首先集群已经是使用过hive一段时间，然后手欠给format了，集群启动后执行hadoop fs -ls /发现结果为空，但是在hive中又能查到库的信息，如图：可以看到hive中的配置信息中并没有指定warehouse的路径，所以为默认，如图：此时再hive中随便创建名为的aaa的数据库然后尝试删除之前的test库时报错：结合上述截图，说明hive中显示的只是之前的元数据信息，本...
摘要由CSDN通过智能技术生成

首先集群已经是使用过hive一段时间，然后手欠给format了，集群启动后执行hadoop fs -ls /发现结果为空，但是在hive中又能查到库的信息，如图：
在这里插入图片描述
可以看到hive中的配置信息中并没有指定warehouse的路径，所以为默认，如图：
在这里插入图片描述
此时再hive中随便创建名为的aaa的数据库
在这里插入图片描述
然后尝试删除之前的test库时报错：

最低0.47元/天 解锁文章
BLLYB200
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
大数据之搭建HDFS分布式文件系统（Hadoop第一篇）
大数据Hadoop学习
12-20 384
在大数下，Hadoop中的HDFS存储应用广范，为了写此篇文章，重新搭建了一回环境，带有命令及截图，有助于大家更好的参考，后面我会分享结合HDFS的基础上搭建HBase。有些同学可能还不知HDFS是什么，我先引用百科的描述 介绍： Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多...
【问题解决】利用Eclipse，在hadoop上传文件到hdfs没有内容
BigCabbageFy的博客
04-08 5621
本文适用于一些在网上找了半天答案都没解决问题的人群，因为我也是在按网上说道弄了一天，最后才解决的。如果你是刚遇到问题，还没有深入，建议你查看这篇文章 http://f.dataguru.cn/hadoop-208802-1-1.html 将问题一步一步排除后仍没有解决的话，可以试试我这个方法。如果还是不行，那就我也无能为力了，革命道路还很漫长，你仍需努力啊！！（笑哭） 问题描述： 它没...
hadoop dfs -ls 不起作用的问题
xiongjiezk的专栏
12-27 8433
在hdfs上创建文件，查看文件时，发现使用如下明明并不生效hadoop fs -mkdir /data创建文件失败 查看文件`hadoop fs -ls /`data则提示ls: Cannot access /data: No such file or directory.查看文件hadoop fs -ls /显示的是系统的根目录。 查了一下，说是新版的hadoop使用hadoop dfs -l
HBASE的安装配置启动
热门推荐
wuruijie321的博客
04-13 1万+
一、HBase介绍HBase是一个分布式的、面向列的开源数据库,源于Google的一篇论文《BigTable：一个结构化数据的分布式存储系统》。HBase以表的形式存储数据，表有行和列组成，列划分为若干个列族/列簇(column family)。欲了解HBase的官方资讯，请访问[HBase官方网站](http://hbase.apache.org/)。 HBase的运行有三种模式：单机模式、伪分...
hadoop fs –ls /hbase 无内容_HBase常见问题集合
weixin_39530509的博客
11-19 415
【问题1】client.HConnectionManager$HConnectionImplementation: Can”t get connection to ZooKeeper: KeeperErrorCode = ConnectionLoss for /hbaseHBase分布式部署模式，执行 >hbase shell — >status显示以上错误，解决方法：关闭防火墙PS：...
win环境 hadoop 3.1.0安装包
最新发布
06-25
使用`hadoop fs -ls /`命令检查HDFS是否工作正常。如果一切顺利，你应该能看到一个名为`/tmp`的目录。 11. **使用Hadoop**： 你可以编写MapReduce程序，并使用Hadoop的命令行工具提交执行。或者使用Hadoop的...
利用ansible 自动 安装Hadoop 集群
05-10
6. **验证与测试**：安装完成后，进行基本的验证测试，如查看HDFS是否正常运行，通过`hadoop fs -ls /`命令检查HDFS根目录，或者运行MapReduce示例任务。 总结来说，通过Ansible自动化安装Hadoop集群，可以极大地...
大数据 hadoop-3.1.3 linux 安装包
06-25
为了验证Hadoop安装成功，可以运行一些简单的测试，如`hadoop fs -ls /`检查HDFS根目录，或者使用WordCount示例程序处理数据。Hadoop还提供了丰富的工具，如HBase（分布式数据库）、Hive（数据仓库工具）和Pig（数据...
hadoop-3.1.3.tar.gz
12-06
启动Hadoop集群，可以依次执行以下命令： ``` start-dfs.sh start-yarn.sh ``` 七、验证Hadoop安装 启动成功后，可以通过访问http://localhost:50070查看NameNode的状态，http://localhost:8088查看ResourceManager...
hadoop-2.7.1 windows版本，bin目录包括hadoop.dll winutils.exe hadoop-2.6.0\bin
03-28
5. **测试运行**：使用`hadoop fs -ls /`命令检查HDFS是否正常运行。 了解和掌握Hadoop的这些基本组件和配置步骤对于在Windows上进行大数据处理和分析是非常重要的。此外，还需要熟悉Hadoop的MapReduce编程模型，...
Hadoop大数据实战系列文章之HDFS文件系统
测试帮日记
11-06 417
Hadoop 附带了一个名为 HDFS(Hadoop分布式文件系统)的分布式文件系统，专门 存储超大数据文件，为整个 Hadoop 生态圈提供了基础的存储服务。 本章内容： 1) HDFS 文件系统的特点，以及不适用的场景 2) HDFS 文件系统重点知识点：体系架构和数据读写流程 3) 关于操作 HDFS 文件系统的一些基本用户命令 1. HDFS 特点 ： HDFS 专为解决大数据存储问题而产生的，其具备了以下特点： 1) HDFS 文件系统可存储超大文件 每个磁盘都有默认的数据块大小
hadoop fs –ls /hbase 无内容_大数据系列之hadoop第三天（HDFS api代码及原理）
weixin_39611389的博客
11-29 110
前言：大数据系列包括hadoop，zookeeper，hive，flume，kafka，hbase，storm，spark等组件，我在这里会很详细跟大家分享集群的搭建和全部组件的使用，会有具体的案例。HDFS API操作实现步骤：1.创建java工程(Map/Reduce Project)2.导入hadoop依赖jar包连接namenode以及读取hdfs中指定文件@Testpublic void...
hadoop fs -ls /报无法连接node-1:9000的问题
程序认生
07-10 2617
可能原因：1、没有启动hadoop 集群 2、没有进行hadoop namenode -format格式化 3、防火墙没有关闭 4、主节点9000端口没有打开 5、主节点9000端口打开了，但是不允许远程访问 6、没有正确配置core-site.xml netstat -tlpn检查主节点9000端口是否打开，且允许远程访问 一般而言，只要启动了hadoop集群，9...
HDFS遇到的问题
黄黄黄黄黄的博客
11-08 705
1.执行hdfs dfs -ls /后返回空白内容 分析：没有创建hdfs文件 执行以下代码，即创建一个/test文件： hdfs dfs -mkdir /test 查看是否成功： 法1：再次执行查看命令，就能看见创建的文件名 法2：登录node01:50070-Utilities-->输入“/”后搜索查看 出现的 2019-11-08 17:46:4...
在eclipse中进行HDFS编程进行词频统计（WordCount），代码没报错输出结果却为空！（已解决）
加辣椒了吗?的博客
04-24 1730
前段时间在初学HDFS编程，在eclipse编写词频统计（WordCount）代码的时候遇到了一个问题，困扰了好久，终于解决了！所以在这里记录分享一下心得。 第一步：启动集群 第二步：创建hadoop项目，并运行 如图：输入文件是test.txt,输出文件是out，结果是运行成功，没有报错信息，但输出文件out里却是空的。这就很奇怪了。 其实有报错还好，没报错是真的难受香菇啊! 一开始找了好多种方法，从代码角度，从编译器角度，再到Hadoop的集群分布都没发现问题，然后就就。。。很自闭！ 迫于无奈，从
Hadoop HDFS常用命令
Well's Column
11-29 1884
HDFS的特点： 一次写入，多次读取 HDFS下的文件操作： 1.列出HDFS文件 hadoop dfs -ls //未带参数的-ls命令没有任何返回值，默认返回HDFS的“home”目录下的内容 //HDFS中，没有当前工作目录这样的概念，也没有cd这个命令 2.列出HDFS目录下某个文档中的文件 hadoop dfs -ls in 3.上传文件到HDFS（下面的命令
集群 并行读取一个hdfs文件为空_HDFS 数据读取流程
weixin_32448581的博客
02-03 509
本文将介绍 HDFS 端到端的数据读操作。因为数据是以分布式方式存储的，那么数据读操作将是并行执行的。并且让你理解 HDFS 读数据流程，以及客户端是如何跟 Slave 节点交互的，以及如何从 Salve 节点读取数据的。HDFS 数据读操作HDFS 数据读取流程下面将详细介绍 HDFS 并行读数据流程，以及客户端是怎么与 Namenode 和 Datanode 交互的，如何对客户端进行身份验证，...
Linux下Hadoop2.7.3集群环境的搭建.docx
06-30
本文描述了在Linux下搭建Hadoop2.7.3集群环境的过程和步骤。该环境可以用于生产环境下的Hadoop和HDFS分布式环境，并且为新人提供了学习和使用的便利。首先，需要安装并配置JDK作为基础环境。由于Oracle官网主要推荐...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值