windows本机连接虚拟机hadoop配置

最新推荐文章于 2022-03-29 22:49:16 发布
最新推荐文章于 2022-03-29 22:49:16 发布
阅读量921 收藏
点赞数
分类专栏： 配置
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37635373/article/details/100915967
版权

基本配置如官方文档中的配置步骤
（https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html）

使用Ifconfig查看虚拟机中的网址192.168.242.128

在core-site.xml中需要给fs.defaultFS节点的value值配置为hdfs://192.168.242.128:8020
同时slaves文件，因为是伪分布式/单节点 只有一个主机 不写localhoast，也修改为192.168.242.128

虚拟机中网络连接方式为 NAT/主机模式
因此主机访问虚拟机使用内网地址访问

带着耳机去梦游
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
windows无法连接虚拟机,虚拟机可以上网
01-20
问题:虚拟机可以上网, 但是windows连接不上虚拟机 解决: 确保iptables 关闭, 我查看是关闭的 [root@hadoop-01 ~]# service iptables status iptables：未运行防火墙。 确保vmware 的服务时启动的,尤其是DHCP 相关...
本地windows操作虚拟机中的HDFS(伪分布式)
m0_48275578的博客
03-20 4807
本文章是配合厦门大学 林子雨 的《大数据技术原理与应用》使用的 本篇文章使用的环境如下: 虚拟机 ：Ubuntu 18.04 阿里云网盘地址 迅雷网盘地址 Hadoop : hadoop 3.3.0 阿里云网盘地址 迅雷网盘地址 windows : win 10 JDK ： 1.8 强烈建议是1.8 阿里云网盘地址 迅雷网盘地址 JDK 已在windows中安装的，且非1.8的, 建议安装两个版本的 JDK (一个原有的，一个1.8) 1. 搭建虚拟机中的HDFS 参考林子雨老师的博客 （安装 hado
Window 环境连接虚拟机中Hadoop及Spark集群
pageniao的博客
12-16 2724
Window 环境连接虚拟机中Hadoop及Spark集群1.Windows安装Hadoop1.1 配置环境变量1.2 下载相似版本的文件 1.Windows安装Hadoop 在windows上把hadoop的压缩包解压到一个没有空格的目录下，比如是D盘根目录 1.1 配置环境变量 HADOOP_HOME=D:\hadoop-2.7.7 Path下添加 %HADOOP_HOME%\bin 1.2 下载相似版本的文件 hadoop.dll #存放在C:\Windows\System32 目录下 winutil
在windows下用浏览器无法访问虚拟机中Linux的hadoop管理页面
热门推荐
温润如风的博客
01-15 2万+
在虚拟机中的Linux中配置好Hadoop之后，我们想要在windows下管理hadoop，那么需要在windows环境下访问虚拟机下的hadoop应用程序，但是在访问的时候 比如输入   虚拟机域名:50070   或者 虚拟机域名:50030 之后访问失败 分析： 一种可能是hadoop没有正常启动，有错误，这样就的正确的查看hadoop启动时，在哪一步出错， 另一种可能就是防火墙没有
windows下，用eclipse连接虚拟机中的hadoop
温润如风的博客
02-20 6636
1. 前言 1.1 目标 具体目标是： 在windows 上能够使用eclipse连接Centos系统上部署的hadoop进行开发与测试 1.2 软硬件要求 硬件要求： 三台普通PC。 当然使用虚拟机也可以，本环境搭建也是VMWare10虚拟机上进行的。 软件要求： 操作系统：Centos7.1。 Hadoop版本: ha
《winutils.exe》，在windows下连接Hadoop集群用到的插件
最新发布
09-05
`winutils.exe`通常位于Hadoop安装目录的bin子目录下，它提供了诸如设置HDFS权限、启动Hadoop服务、管理Hadoop配置等一系列功能。对于开发者而言，它的重要性在于能够帮助执行如Hive、HBase等基于Hadoop的服务的...
Windows7下eclipse调试Fedora虚拟机的hadoop+hbase伪分布式
11-27
由于资源有限，只能在本机windows环境下搭建vmware虚拟操作系统fedora上运行hadoop+hbase。 主要分为以下几个部分进行介绍： 一、环境版本要求和准备 二、Fedora服务器hadoop安装过程 三、Fedora服务器Hbase配置...
hadoop 虚拟机 连接 dll
03-14
标题提到的“hadoop 虚拟机 连接 dll”，这可能涉及到在Eclipse环境下配置Hadoop开发环境，特别是当涉及到本地Windows系统与Hadoop虚拟机之间的连接时，可能会遇到动态链接库（DLL）的问题。在Windows操作系统中，...
Windows环境下Hadoop开发环境配置.docx
10-30
在本例中，使用了三台运行Ubuntu 10.0.4的虚拟机搭建了一个Hadoop分布式集群。集群包括一个NameNode（hadoop1，IP: 192.168.201.104）和两个DataNodes（hadoop2, IP: 192.168.201.54 和 hadoop3, IP: 192.168.201....
windows10下 eclipse连接虚拟机中的Hadoop伪分布式集群
Kingsley's Blog
08-21 2736
在windows用eclipse连接hadoop之后，可以便于进行mapreduce开发，非常方便，如果在虚拟机里面用eclipse的话 ，emmmmmm，你会卡到怀疑人生。 首先需要去下载eclipse，这个直接官网就ok link:https://www.eclipse.org/downloads/ 还需要下载eclipse连接hadoop的插件 hadoop-...
Windows环境下采用eclipse连接虚拟机中的Hadoop伪分布式集群
quintind的专栏
09-06 1万+
目的及意义 学会搭建伪分布式集群环境，以便于理解MapReduce及HDFS； 采用eclipse与伪分布式集群连接有利于分布式程序的调试； 现在网络上的文章多是介绍如何搭建伪分布式集群或者是仅介绍在eclipse中如何连接已建立好的伪分布式集群，且大部分介绍都是基于hadoop1.x系列。 软件列表 序号 软件名称 功能 1 hadoop-2.6.0-x64.tar.gz 实
使用IDEA 2019在windows 10 上连接远程hadoop集群（虚拟机）开发MapReduce
sdc_sh的专栏
08-12 4991
0 前序 暑假期间参加了一个关于大数据的培训，当时用培训老师给出的相关软件实验了一遍，感觉收获很大，回到学校后在更新的版本中又实现了一遍，这里主要就在新版本中的一些环境配置做些笔记，供自己后续实践参考，有些步骤可能会多余，但由于是初学，也就只能在自己掌握的情况下做些调整。 在前期的CentOS中集群环境下的hadoop 3.2 配置中没有碰到过多的问题，主要的一个就是jdk的选择问题，之前选...
windows下eclipse远程连接虚拟机CentOs里的Hadoop-2.7.3
weixin_43631997的博客
10-14 1805
window下eclipse远程连接虚拟机CentOs里的Hadoop-2.7.3一、安装环境二、步骤1.安装插件(1) 将hadoop-eclipse-plugin-2.7.3.jar复制到eclipse的dropins目录下(2) 将插件包里的hadoop.dll和winutils.exe复制到你hadoop解压后的bin目录下(3) 将hadoop.dll文件复制到C:\Windows\System32目录下2.插件的配置与使用（1）设置hadoop安装目录（2）打开Map/Reduce视图（2）新建
虚拟机与Windows下Hadoop的环境配置与安装
Wan的博客
06-06 1685
虚拟机与Windows下Hadoop的环境配置与安装Hadoop 的配置与安装准备工作环境变量配置配置文件配置格式化namenode虚拟机内部操作检查windows下hadoop配置 Hadoop 的配置与安装 需要jdk已经配置，这是前提！！ 准备工作 将hadoop安装包上传到虚拟机中。 检查IP和hostname的映射是否正确 #查看本机ip ip addr #查看hostname hostname #查看hosts配置信息 vim /etc/hosts 对应好！ 解压hado
win10中用Intellij IDEA连接虚拟机Hadoop
OwnYoung的博客
12-09 5880
win10中用Intellij IDEA连接虚拟机Hadoop 确保安装好了jdk1.8以上&maven3.0以上，hadoop cmd命令查看 maven安装教程 hadoop文件解压，bandzip报错，所以安装winrarcmd解压： 确保hadoop正常运行： 可能报错： Hadoop Error: JAVA_HOME is incorrectly set 在网上搜索了下资料发现原来是路径上包含了一个空格 解决办法：用路径替代符 C:\PROGRA~1\Java\jdk1.8.0_9
window本机远程连接虚拟机的hdfs
e5bb96的博客
12-20 2339
服务器ip：192.168.66.128 测试主机能否连接虚拟机 ping 192.168.66.128 修改虚拟机hadoop中core-site.xml vim ./etc/hadoop/core-site.xml <property> <name>fs.defaultFS</name> <value>hdfs://192.168.66.128:9000</value> </property> 启动hadoop
在windows上的浏览器上连接wmware虚拟机上的hadoop集群不成功解决方法
啊水水水的博客
03-29 3635
在windows上的浏览器上连接WMware虚拟机的hadoop集群 如果发现使用“hadoop101:8980”的网址无法连接hadoop集群，（1）首先检查虚拟机的防火墙是否关闭： （2）若未关闭，则输入，下面两条命令： （3）若虚拟机的防火墙已关闭，则检查直接使用ip地址替换hadoop101是否能连通hadoop的web端： 若成功连接，则说明，windows的C:\Windows\System32\drivers\etc目录下的hosts文件中没有该虚拟机名称和ip地址的映射，补充成功即可。
Windows上idea怎么连接虚拟机Hadoop
06-09
要在Windows上的IDEA中连接到虚拟机中运行的Hadoop，需要进行以下步骤： 1. 首先，确保您已经在虚拟机上安装和配置了Hadoop，并且Hadoop已经在运行状态。 2. 在Windows上的IDEA中，安装Hadoop插件。在IDEA中，选择“File”->“Settings”->“Plugins”，搜索并安装Hadoop插件。 3. 配置Hadoop插件。在IDEA中，选择“File”->“Settings”->“Tools”->“Hadoop”，输入Hadoop的安装路径和配置文件路径。 4. 配置Hadoop的环境变量。在Windows操作系统中，将Hadoop的bin目录添加到系统的PATH环境变量中。 5. 在IDEA中编写和运行MapReduce程序。在IDEA中，打开您的MapReduce项目并编写代码。然后，运行MapReduce程序并选择“Run Configuration”，在“Hadoop”选项卡中选择Hadoop集群的配置信息，即可连接到虚拟机中的Hadoop并运行程序。 以上是在Windows上的IDEA中连接虚拟机Hadoop的基本步骤，具体实现方法可能会因版本和配置的不同而有所不同。如果您遇到任何问题，请参考Hadoop插件的官方文档或其他相关文档，或者在网上搜索相关的解决方案。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值