eclipse连接hdfs

最新推荐文章于 2022-09-29 23:30:54 发布
最新推荐文章于 2022-09-29 23:30:54 发布
阅读量216 收藏 3
点赞数
文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43334838/article/details/115382857
版权

准备工作

  • 在windows下安装eclipse,hadoop2.8.0,hadoop-eclipse-kepler-plugin-2.8.0插件，hadoopBin包

ps.hadoop版本与,hadoop-eclipse-kepler-plugin插件版本得一致，不一致可直接改插件版本与hadoop一致

  • 将hadoop-eclipse-kepler-plugin-2.8.0插件放入eclispe的plugins目录下
    D:\eclipse\eclipse\plugins
  • 将hadoopBin文件夹下的所有文件复制到hadoop的bin目录下 D:\hadoop\hadoop-2.8.0\bin

接着按下述步骤进行
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
关闭防火墙命令systemctl stop firewalld
在这里插入图片描述

在这里插入图片描述

now awake
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
eclipse链接hdfs方式
11-22
eclipse远程连接hadoop-2.7.0
eclipse的hdfs插件.rar
11-02
实现了连接hdfs,新建MapRedecu项目,新建mapper类,新建Reducer类,新建Driver类等MapRedecu开发需要的功能!!
eclipse下连接hdfs
qq_44797209的博客
04-10 341
Eclipse下如何链接hdfs 准备工作： 1，eclipse 2，jdk 3，hadoop包 4，hadoop-eclipse-plugin-2.7.3插件 1官网下载eclipse：https://www.eclipse.org/downloads/ 2java官网下载： https://docs.oracle.com/javase/ 3Hadoop官网下载： https://hado...
Eclipse连接hdfs
one_super_doer的博客
05-26 5851
Eclipse连接Hadoop一、实验目的1.通过Eclipse连接Hadoop2.用Eclipse对HDFS进行操作二、实验原理Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。通过Eclipse的Hadoop插件可以使Eclipse对HDFS进行操作，同时，可以进行程序编写后的对集群进行MepReduce操作...
eclipse连接HDFS
共同进步
11-13 1864
hdfs中有各种角色包含： namenode ， datanode，secondarynamenode，client Client角色连接到namenode节点， 有两个条件， （1），安装Hadoop程序； （2），配置core-site.xml指定namenode的端口的地址 或者通过工具能够找到namenode <property> <name>fs.defaultFS</name> <value>hdfs://node1
eclipse的mapreduce插件
05-04
连接hadoop的文件系统，HDFS
hadoop-eclipse-plugin
12-04
eclipse连接hdfs的插件有2.2.0、2.4.1、2.6.0 3个版本供使用
hadoop伪集群搭建及eclipse插件配置
06-16
hadoop伪集群搭建及eclipse插件配置，主要介绍伪集群下配置文件的配置及eclipse插件配置。
win7下eclipse插件连接linux下hdfs单机伪集群 hadoop 2.6
BusyMonkey
02-16 2475
1、首先在linux上搭建好单击伪集群，这里是参考教程：点击打开链接 2、下载好eclipse连接hdfs的插件，要统一版本，这里linux使用的是64位的centos 6.4，hadoop是2.6，所所以的插件是hadoop-eclipse-plugin-2.6.0.jar，下载地址：点击打开链接 3、重启eclipse，会出现这个： 4、hadoop在windows上也要...
配置Eclipse连接Hadoop
04-13
NULL 博文链接：https://dacoolbaby.iteye.com/blog/1730321
eclipse访问hdfs
快乐的瑾
10-30 744
通过eclipse插件访问远程集群上的hdfs时，如果想往某目录下写数据，需要先将目录的所有者赋给你的windows用户（hadoop dfs -chown -R win上登录用户名 hdfs上目录名）。（或者设为允许所有人写？未试过）
Eclipse连接Hadoop（HDFS）
actionbean的博客
09-29 4519
Eclipse连接Hadoop（HDFS）
hadoop+hbase+zookeeper 分布式集群搭建 + eclipse远程连接hdfs 完美运行
热门推荐
shatelang的专栏
05-27 2万+
之前有一篇文章已经很详细介绍了如何安装hadoop+hbase+zookeeper  文章标题为：hadoop+hbase+zookeeper 分布式集群搭建完美运行 其网址：http://blog.csdn.net/shatelang/article/details/7605939         这篇文章要讲述的是hadoop1.0.0+hbase0.92.1+zookeeper3.3.
在eclipse中操作HDFS
weixin_38008837的博客
10-14 1195
本文主要讲述如何在本地eclipse操作HDFS集群 1.配置hadoop的插件，以便在eclipse中操作HDFS 1）在eclipse的安装路径下查看是否有dropins文件夹，若没有则新建一个。 2）在dropins文件夹下创建plugins文件夹。 3）把hadoop-eclipse-plugin-2.6.0.jar包放到plugins文件夹下。 2.重启eclips...
eclipse连接hdfs连接不上
jueqi2010的专栏
11-27 260
1、集群： [root@localhost conf]# more core-site.xml fs.default.name hdfs://192.168.105.10:9000 hadoop.tmp...
本地Eclipse连接HDFS进行简单的文件操作
weixin_30836759的博客
11-15 300
昨天总结了一点自己在搭建Hadoop完全分布式环境过程中遇到的几个小问题以及解决方案，今天在搭建成功的环境中进行了简单的文件操作，包括：文件目录的创建、文件的创建、本地文件的上传、文件的重命名、文件的删除以及其他几个关于文件的操作，希望对初学的练习者有所帮助。 1 package org.apache.hadoop.examples; 2 3 4...
eclipse 实现 Hdfs java API
博樽
03-14 1055
eclipse 远程操作Hadoop实现HDFS功能
Eclipse配置hadoop的HDFS连接
叶小刀
09-03 3863
启动hadoop和安装好eclipse之后，将插件拷贝到eclise安装目录中的plugins和dropins中 打开eclipse， 打开windows进入到perspective进入other： 点击确定。 点击下面的Map/Reduce Location ，再选择右边的小象图标：进入 因为hadoop配置再node40，所以按如下配置： 接着就可以看到了，与hdfs中...
Eclipse连接hadoop
最新发布
04-04
在 Eclipse 中连接 Hadoop，需要进行以下步骤： 1. 安装 Hadoop 的 Eclipse 插件 Hadoop 的 Eclipse 插件叫做 Eclipse Plugin for Hadoop (EPH)，可以从 Hadoop 官方网站或 GitHub 上下载。 下载地址： - 官方网站：http://hadoop.apache.org/releases.html#Download - GitHub：https://github.com/winghc/hadoop2x-eclipse-plugin 2. 安装 Eclipse 如果还没有安装 Eclipse，需要先下载并安装。 下载地址：https://www.eclipse.org/downloads/ 3. 将 EPH 安装到 Eclipse 将 EPH 解压后，将里面的 hadoop-eclipse-plugin-2.7.3.jar 文件复制到 Eclipse 的 plugins 目录下。 例如，如果 Eclipse 安装在 D:\eclipse 目录下，那么将 hadoop-eclipse-plugin-2.7.3.jar 复制到 D:\eclipse\plugins 目录下。 4. 配置 Hadoop 的连接信息 打开 Eclipse，依次选择 Window -> Preferences -> Hadoop，然后配置 Hadoop 的连接信息，包括 Hadoop 安装路径、Hadoop 配置文件路径、Hadoop 的 MapReduce Job Tracker 和 HDFS Name Node 的连接信息。 5. 创建 Hadoop 项目 在 Eclipse 中创建一个新的 Java 项目，然后右键单击项目，选择 New -> MapReduce Job。根据需要填写 MapReduce Job 的名称、输入路径、输出路径、Mapper、Reducer 等信息。 6. 运行 MapReduce Job 在 Eclipse 中右键单击 MapReduce Job 类，选择 Run As -> Run on Hadoop。Eclipse 将会自动将 MapReduce Job 打包成 JAR 文件，并提交给 Hadoop 集群运行。可以在 Eclipse 的 Console 视图中查看 MapReduce Job 的运行日志。 以上就是 Eclipse 连接 Hadoop 的基本步骤。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值