linux(CentOS 7)下eclipse配置maven-3.3.3 和新建maven项目开发hadoop-2.6.0接口

47 篇文章 0 订阅

首先下载一个eclipse,这里我的linux是CentOS 64位,用的是这个版本的eclipse,因为占用内存比较小:


然后运行 tar -zxvf eclipse.........之后在当前目录下就会有一个eclipse了:


然后是安装 maven,这里是安装程序:apache-maven-3.3.3.bin.tar.gz

同样是先解压,然后再是设置环境变量,vim /etc/profile 加入以下内容

然后使用:source /etc/profile 来生效,如果无法生效还是建议重启。

这里注意的是前提是要安装了jdk,所以在jdk的环境变量上加入maven的环境变量就行,第二行的最后:$JAVA_HOME/lib/tools.jar这句话是在用eclipse配置maven项目的依赖项的时候找不到tools.jar这个文件的路径而在依赖项中添加的,所以这里设置环境变量可以不用加入这句话。


设置好环境变量之后运行:java -version和 mvn -v会出现以下效果:

然后进入到解压好的maven中法setting.xml 在:apache-maven-3.3.3/conf目录下,加入如下浅蓝色内容:

    <mirror>
       <id>ibiblio.org</id>
       <name>ibiblio Mirror of http://repo1.maven.org/maven2/</name>
       <url>http://mirrors.ibiblio.org/pub/mirrors/maven2</url>
       <mirrorOf>central</mirrorOf>  
    </mirror>
    <mirror>  
       <id>jboss-public-repository-group</id>  
       <mirrorOf>central</mirrorOf>  
       <name>JBoss Public Repository Group</name>  
       <url>http://repository.jboss.org/nexus/content/groups/public</url>  
    </mirror>


如果出现这样的错误:Failed to execute goal org.apache.maven.plugins:maven-surefire-plugin:2.12.4:test (default-test) on
通常是网站源的问题,修改一下上面的代码,加入另外的网址,这样一般就能执行了:

<mirror> 
       <id>ibiblio.org</id> 
       <name>ibiblio Mirror of http://repo1.maven.org/maven2/</name> 
       <url>http://repo1.maven.org/maven2</url> 
       <mirrorOf>central</mirrorOf>  
    </mirror>
    <mirror>  
       <id>jboss-public-repository-group</id>  
       <mirrorOf>central</mirrorOf>  
       <name>JBoss Public Repository Group</name>  
       <url>http://repository.jboss.org/nexus/content/groups/public</url>  
    </mirror>
    <mirror>
      <id>planetmirror.com</id>
      <name>PlanetMirror Australia</name>
      <url>http://downloads.planetmirror.com/pub/maven2</url>
      <mirrorOf>central</mirrorOf>
    </mirror>



打开之前解压好的eclipse,安装maven插件:在help->eclipse marketplace中 搜索并安装 maven integration for eclipse 这个工具。

安装好之后进入window-reference ,add加入maven的安装路径:



然后设置setting.xml文件变量:global和user都要设置:


然后apply和ok。


现在可以在新建maven项目: File->New->Other



Group ID和 Artifact ID自己设置。然后完成。


然后在pom.xml文件中加入hadoop-2.6.0相关的依赖文件,然后在项目名称上右键->Maven->Updata Program..:


点击ok,然后如果pom.xml文件提示缺少tools.jar,则再加入tools路径的依赖,如果提示还缺少htrace-core.jar,就百度hadoop maven进入官网搜索需要的文件,并且放到.m2/这个文件夹中,这个文件夹一般在用户路径~下,即/home/hou/.m2/,在这个路径下找到htrace文件夹然后放到指定版本文件夹中,这里提供htrace-core-3.0.4.jar文件的下载地址:点击打开链接,添加好之后,再运行一下 updata program。以下是pom文件:

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  <modelVersion>4.0.0</modelVersion>

  <groupId>maven</groupId>
  <artifactId>maven</artifactId>
  <version>0.0.1-SNAPSHOT</version>
  <packaging>jar</packaging>

  <name>maven</name>
  <url>http://maven.apache.org</url>

  <properties>
    <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
  </properties>

  <dependencies>
    <dependency>
      <groupId>junit</groupId>
      <artifactId>junit</artifactId>
      <version>3.8.1</version>
      <scope>test</scope>
    </dependency>
    <dependency>
        <groupId>org.apache.hadoop</groupId>
        <artifactId>hadoop-common</artifactId>
        <version>2.6.0</version>
    </dependency>
    <dependency>
        <groupId>org.apache.hadoop</groupId>
        <artifactId>hadoop-hdfs</artifactId>
        <version>2.6.0</version>
    </dependency>
    <dependency>
        <groupId>jdk.tools</groupId>
        <artifactId>jdk.tools</artifactId>
        <version>1.7</version>
        <scope>system</scope>
        <systemPath>${JAVA_HOME}/lib/tools.jar</systemPath>
    </dependency>
  </dependencies>
</project>

然后记得修改Group ID和 Artifact ID为自己的名字,如果你自己搭建了hadoop的HDFS的集群,这里就可以测试,假如你的HDFS上有一个txt文件,通过以下程序就可以输出文件里面的内容到控制台,其中uri是HDFS中txt文件的路径,当然也有localhost的IP地址。代码如下:

package maven.maven;

import java.io.InputStream;
import java.net.URI;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.*;
import org.apache.hadoop.io.IOUtils;

public class App {
    public static void main(String[] args) throws Exception {
        String uri = "hdfs://10.19.155.41:9000/newfile/test.txt";
        Configuration conf = new Configuration();
    FileSystem fs = FileSystem. get(URI.create (uri), conf);
    InputStream in = null;
    try {
         in = fs.open( new Path(uri));
         IOUtils.copyBytes(in, System.out, 4096, false);
        } finally {
         IOUtils.closeStream(in);
        }
    }
}

如果要搭建Java Web开发环境(需配置tomcat服务器)就要用eclipse的J2EE版本。

在J2EE中创建了maven项目之后可以按照以下操作转变为web项目,右键项目名,点属性:



  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值