HDFS 集群迁移 Could not preview the file

已于 2022-04-17 16:51:30 修改
阅读量1.1k 收藏
点赞数 1
分类专栏： hadoop 文章标签： hadoop
于 2022-04-17 15:40:03 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Adam_captain/article/details/124230593
版权

我在使用 hadoop distcp hdfs://hadoop102:8020/ hdfs://hadoop105:8020/ 递归拷贝HDFS所有数据后，发现在hadoop105这个集群中无法查看拷贝完的文件。

然后我去下载这些文件发现其他DN的9864端口无法访问，看了一眼URL，发现是hadoop106:9864或者hadoop107:9864，才想起来这台物理机的hosts没进行映射。最后配置完物理机的hosts后，新迁移的集群就能完美工作了。

AdamShyly
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
解决Hadoop在浏览器中Browse Directory，无法下载文件的问题
TrueDei
10-03 8155
解决办法 把你linux中的hosts文件中的映射数据，复制到windows下的hosts中 解决了
hdfs java客户端使用，文件上传下载，预览的实现
最新发布
Honmaple的博客
06-20 340
1.3 温馨提示，如果要使用java客户端的api，本地就必须需要安装hadoop才能调用，如果要脱离环境，可以使用web-api，具体的可以搜索一下hadoop web-api。1.2 windows hadoop util 安装。1.1 Linux hadoop集群搭建。本项目是基于java客户端api实现的。
在云上搭建的集群，Couldn‘t preview the file
yingzi的技术博客
02-06 1406
打开我在阿里云创建的集群，配置规则中新建9864端口
HDFS报错：Couldn‘t preview the file.
m0_67656269的博客
01-05 3110
解决hdfs的web界面不能能查看文件内容问题
hdfs : Couldn‘t preview the file.
在怀疑和自我怀疑中迷失
05-28 467
没有配置windows系统中的hosts文件里的主机名。
hdfs集群间数据交换.zip
01-04
在大数据处理领域，Hadoop Distributed File System（HDFS）是一种广泛应用的分布式文件系统，它能够高效地存储和处理海量数据。当面临多个HDFS集群之间的数据交换需求时，我们需要了解如何在这些集群间进行安全、...
外网无法访问HDFS org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block
01-09
报错 org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block 2、百度结果 参考 https://blog.csdn.net/xiaozhaoshigedasb/article/details/88999595  防火墙记得关掉； 查看DataNode是否启动；...
HDFS集群搭建
07-02
HDFS能 够提供对数据的可扩展访问，通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构，同现 有的一些文件系 统类似，如可以对文件进行创建、删除、重命名等操作。
一种跨HDFS集群的文件资源分布式高效存储方法
01-12
针对传统文件资源存储方法存在存储效率低的问题，提出了一种跨HDFS集群的文件资源分布式高效存储方法。依据HDFS集群文件资源特征及存储原理，分析资源分布式存储的逻辑关系，保证文件资源存储环境安全。依据标准...
一键停止HDFS集群、YARN集群、Hive服务脚本
12-23
一键停止HDFS集群、YARN集群、Hive服务脚本
【已解决】Hadoop HDFS 无法通过主机名访问和打开文件时出现 Couldn‘t preview the file. 错误
weixin_44473210的博客
11-09 778
文件，将集群主机的地址和主机名的映射写入文件，保存退出。），右键改文件，做以下修改。Windows 下打开。重新测试，一切 ok。
阿里云服务器上HDFS报错：Couldn‘t preview the file.
qq_56468332的博客
08-17 378
在本地虚拟机上可以正常读文件 但在阿里云服务器上报错Couldn’t preview the file.
关于通过查看hdfs上传文件，出现Couldn‘t preview the file.
AlphaG的博客
10-16 2918
问题背景：自己通过hdfs上传文件，但是在浏览器页面不能查看到文件的内容，出现Couldn't preview the file. 解决方法：windows：在 C:\Windows\System32\drivers\etc\hosts 末尾增加内容，下面的内容配置根据自己搭建的集群信息来进行变更。 169.254.142.102 hadoop102 169.254.142.103hadoop103 169.254.142.104hadoop104 ...
hadoop网页无法预览文件
c1048426415的博客
01-27 170
dfs.webhdfs.enabled true
浏览器查看hdfs文件时报错Couldn‘t preview the file. NetworkError: Failed to execute ‘send‘ on ‘XMLHttpRequest‘:
weixin_41798737的博客
04-09 241
修改"C:\Windows\System32\drivers\etc\hosts"
2021-08-10 HDFS Web报错Couldn‘t preview the file.
学习是一种信仰的博客
08-10 7434
在查看文件内容时，在红框位置出现报错“Couldn’t preview the file” 解决方法 修改hdfs-site.xml，添加配置信息 <property> <name>dfs.webhdfs.enabled</name> <value>true</value> </property> 配置浏览器所在系统的 hosts 文件 windows： 在 C:\Windows\System32\driver
Web页面预览HDFS上的图片文件
weixin_45506408的博客
07-19 2275
html代码： <div style="float: left"> <!-- 图片展示按钮 --> <button class="myBtn4"> 确认展示 </button> </div> <div id="d1" class="Z_slider"> </div> js代码： 细节说明： // 错误写法 （不可直接将blob加载到img中，由于blob太大，会有性能影响，所以先释
Could not find a file system implementation for scheme 'hdfs'. The scheme is not directly supported by Flink and no Hadoop file system to support this scheme could be loaded
07-13
This error message indicates that Flink is unable to find a file system implementation for the 'hdfs' scheme. Flink does not natively support Hadoop Distributed File System (HDFS), so you need to configure it to work with HDFS. To resolve this issue, you can follow these steps: 1. Make sure you have the Hadoop libraries installed on your Flink cluster. 2. Update the Flink configuration file (`flink-conf.yaml`) and add the following properties: ``` fs.hdfs.hadoopconf: /path/to/hadoop/conf fs.hdfs.hadoop.user: hdfs ``` Replace `/path/to/hadoop/conf` with the actual path to your Hadoop configuration directory. Replace `hdfs` with the Hadoop user you want to use (e.g., `hadoop`). 3. Restart your Flink cluster for the changes to take effect. By configuring Flink with the appropriate Hadoop libraries and settings, it should be able to load the Hadoop file system implementation for the 'hdfs' scheme and work with HDFS.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值