【Bigtop编译】maven配置nexus私服提速

已于 2024-09-18 15:42:52 修改
阅读量752 收藏 25
点赞数 11
分类专栏： 大数据专栏 文章标签： maven java hadoop 大数据 ambari bigdata 数据库
于 2024-09-18 15:37:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TTBIGDATA/article/details/142335050
版权

maven配置nexus私服提速🚀

快捷导航

正题

🎯 推荐使用 Maven 3.8.4

🔧 原因：在大数据项目中，Maven 3.9以上版本可能会出现一些编译问题，尤其是在处理复杂依赖时。为了确保编译过程的稳定性，建议使用 Maven 3.8.4 版本。

一、maven设置nexus私服方案

🛠️ 1. 项目级别配置 (Project-Level)

在项目的 pom.xml 文件中，配置 Nexus 私服并添加用户名和密码的相关配置。

pom.xml 完整配置：

<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>com.example</groupId>
    <artifactId>my-project</artifactId>
    <version>1.0.0</version>

    <!-- 配置私服仓库 -->
    <repositories>
        <repository>
            <id>nexus-releases</id>
            <url>http://your-nexus-server/repository/maven-public/</url>
            <releases>
                <enabled>true</enabled>
            </releases>
            <snapshots>
                <enabled>false</enabled>
            </snapshots>
        </repository>
    </repositories>

    <!-- 发布到私服 -->
    <distributionManagement>
        <repository>
            <id>nexus-releases</id>
            <url>http://your-nexus-server/repository/maven-releases/</url>
        </repository>
        <snapshotRepository>
            <id>nexus-snapshots</id>
            <url>http://your-nexus-server/repository/maven-snapshots/</url>
        </snapshotRepository>
    </distributionManagement>
</project>

🔑 说明：

  • repositories 定义从私服仓库下载依赖。
  • distributionManagement 用于发布构件到私服仓库。

用户名和密码配置：

为了保证私服的安全性，用户名和密码不直接写在 pom.xml 中。你可以通过全局的 settings.xml 文件来配置认证信息，避免泄露凭证。

🌐 2. 全局配置 (Global-Level)

通过 ~/.m2/settings.xml 来配置用户名和密码，适用于所有 Maven 项目。

settings.xml 配置：

<settings xmlns="http://maven.apache.org/SETTINGS/1.0.0"
          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
          xsi:schemaLocation="http://maven.apache.org/SETTINGS/1.0.0 http://maven.apache.org/xsd/settings-1.0.0.xsd">
  
    <mirrors>
        <!-- 配置 Nexus 私服为中央仓库的镜像 -->
        <mirror>
            <id>nexus-mirror</id>
            <mirrorOf>central</mirrorOf>
            <url>http://your-nexus-server/repository/maven-public/</url>
        </mirror>
    </mirrors>

    <servers>
        <!-- 配置私服的认证信息 -->
        <server>
            <id>nexus-releases</id>
            <username>your-username</username>
            <password>your-password</password>
        </server>
        <server>
            <id>nexus-snapshots</id>
            <username>your-username</username>
            <password>your-password</password>
        </server>
    </servers>

    <profiles>
        <profile>
            <id>nexus</id>
            <repositories>
                <repository>
                    <id>nexus-releases</id>
                    <url>http://your-nexus-server/repository/maven-public/</url>
                    <releases>
                        <enabled>true</enabled>
                    </releases>
                    <snapshots>
                        <enabled>false</enabled>
                    </snapshots>
                </repository>
            </repositories>
        </profile>
    </profiles>

    <activeProfiles>
        <!-- 激活 Nexus 配置 -->
        <activeProfile>nexus</activeProfile>
    </activeProfiles>
</settings>

🔐 说明：

  • servers 标签中包含了用户名 (your-username) 和密码 (your-password) 的配置。
  • 这样就不会在 pom.xml 中暴露敏感信息，保障了安全性。
🤔 3. 选择建议：
  • 项目级别：在 pom.xml 中配置私服仓库和发布仓库，而认证信息通过全局 settings.xml 配置。
  • 全局级别：通过 settings.xml 为所有项目配置认证信息，避免在 pom.xml 中泄露敏感信息。

建议将用户名和密码信息安全地存放在 ~/.m2/settings.xml 中，而不是在 pom.xml 中硬编码敏感信息。

idea下建议查看mvn_home,修改conf/settings.xml文件

本人更倾向于全局设置：

在这里插入图片描述

我这里做了统一的汇聚，关联所有的下载镜像：

在这里插入图片描述

二、在 Bigtop 项目中编译案例—Zookeeper

2.1 编译日志
# zookeeper 基于gradle 打rpm的编译
gradle \
zookeeper-rpm \
-PparentDir=/usr/bigtop \
-Dbuildwithdeps=true \
-PpkgSuffix \
-d


Downloaded from nexus: http://172.20.0.2:8081/repository/maven-public/org/codehaus/jackson/jackson-core-asl/1.1.1/jackson-core-asl-1.1.1.jar (104 kB at 43 kB/s)
Downloaded from nexus: http://172.20.0.2:8081/repository/maven-public/com/sun/jersey/jersey-client/1.1.5.1/jersey-client-1.1.5.1.jar (90 kB at 37 kB/s)
[INFO]
[INFO] --- maven-clean-plugin:3.0.0:clean (default-clean) @ zookeeper-contrib-rest ---
[INFO]
[INFO] --- git-commit-id-plugin:4.9.10:revision (find-current-git-revision) @ zookeeper-contrib-rest ---
[INFO]
[INFO] --- maven-antrun-plugin:1.8:run (default) @ zookeeper-contrib-rest ---
[INFO] Executing tasks

main:
[INFO] Executed tasks
[INFO]
[INFO] --- maven-remote-resources-plugin:1.5:process (process-resource-bundles) @ zookeeper-contrib-rest ---
[INFO]
[INFO] --- maven-resources-plugin:2.7:resources (default-resources) @ zookeeper-contrib-rest ---
[INFO] Using 'UTF-8' encoding to copy filtered resources.
[INFO] skip non existing resourceDirectory /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-restsrc/main/java/resources
[INFO] Copying 3 resources
[INFO]
[INFO] --- maven-compiler-plugin:3.8.1:compile (default-compile) @ zookeeper-contrib-rest ---
[INFO] Changes detected - recompiling the module!
[INFO] Compiling 20 source files to /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/classes
[INFO]
[INFO] --- maven-resources-plugin:2.7:testResources (default-testResources) @ zookeeper-contrib-rest ---
[INFO] Using 'UTF-8' encoding to copy filtered resources.
[INFO] skip non existing resourceDirectory /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/src/test/resources
[INFO] Copying 3 resources
[INFO]
[INFO] --- maven-compiler-plugin:3.8.1:testCompile (default-testCompile) @ zookeeper-contrib-rest ---
[INFO] Changes detected - recompiling the module!
[INFO] Compiling 11 source files to /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/test-classes
[INFO]
[INFO] --- maven-surefire-plugin:2.22.1:test (default-test) @ zookeeper-contrib-rest ---
[INFO] Tests are skipped.
[INFO]
[INFO] --- maven-jar-plugin:3.1.0:jar (default-jar) @ zookeeper-contrib-rest ---
[INFO] Building jar: /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/zookeeper-contrib-rest-3.5.9.jar
[INFO]
[INFO] --- maven-site-plugin:3.5.1:attach-descriptor (attach-descriptor) @ zookeeper-contrib-rest ---
[INFO]
[INFO] --- maven-jar-plugin:3.1.0:test-jar (Jar Tests Package) @ zookeeper-contrib-rest ---
[INFO] Building jar: /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/zookeeper-contrib-rest-3.5.9-tests.jar
[INFO]
[INFO] >>> maven-source-plugin:3.0.1:jar (attach-sources) > generate-sources @ zookeeper-contrib-rest >>>
[INFO]
[INFO] --- git-commit-id-plugin:4.9.10:revision (find-current-git-revision) @ zookeeper-contrib-rest ---
[INFO]
[INFO] --- maven-antrun-plugin:1.8:run (default) @ zookeeper-contrib-rest ---
[INFO] Executing tasks

main:
[INFO] Executed tasks
[INFO]
[INFO] <<< maven-source-plugin:3.0.1:jar (attach-sources) < generate-sources @ zookeeper-contrib-rest <<<
[INFO]
[INFO]
[INFO] --- maven-source-plugin:3.0.1:jar (attach-sources) @ zookeeper-contrib-rest ---
[INFO] Building jar: /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/zookeeper-contrib-rest-3.5.9-sources.jar
[INFO]
[INFO] --- maven-javadoc-plugin:3.0.1:jar (attach-javadocs) @ zookeeper-contrib-rest ---
[INFO]
Loading source files for package org.apache.zookeeper.server.jersey...
Loading source files for package org.apache.zookeeper.server.jersey.filters...
Loading source files for package org.apache.zookeeper.server.jersey.resources...
Loading source files for package org.apache.zookeeper.server.jersey.cfg...
Loading source files for package org.apache.zookeeper.server.jersey.jaxb...
Constructing Javadoc information...
Standard Doclet version 1.8.0_202
Building tree for all the packages and classes...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/RestMain.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/ZooKeeperService.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/filters/HTTPBasicAuth.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/JAXBContextResolver.html.
..
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/KeeperExceptionMapper.htm
l...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/RuntimeExceptionMapper.ht
ml...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/SessionsResource.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/ZErrorWriter.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/resources/ZNodeResource.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/cfg/Credentials.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/cfg/Endpoint.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/cfg/HostPort.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/cfg/HostPortSet.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/cfg/RestCfg.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZChildren.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZChildrenJSON.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZError.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZPath.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZSession.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/org/apache/zookeeper/server/jersey/jaxb/ZStat.html...
Generating /opt/modules/bigtop/build/zookeeper/rpm/BUILD/apache-zookeeper-3.5.9/zookeeper-contrib/zookeeper-contrib-rest/target/apidocs/overview-frame.html...
2.2 使用ambari-env 一键解决环境准备问题

项目地址: ambari-env: Ambari+Bigtop 一站式编译和部署解决方案 (gitee.com)

Step1 配置直刷指定位置

在这里插入图片描述

Step2 统一的模板文件

在这里插入图片描述
Step3 编译前自动准备环境

在这里插入图片描述

在这里插入图片描述

TTBIGDATA
关注
专栏目录
Ambari+Metrics+Bigtop 全家桶编译部署攻略——Ambari系列（ambari 2.8.0+centos 7.9 +bigtop 3.3.0）
success could be revenge的博客
03-23 2956
1、源码已经完成Ambari+Metrics+Bigtop 最新版的编译及部署，后续会放魔改包和一件部署脚本2、时间有限，我会尽快更新完毕所有内容，包括分享中间才得坑，50条3、编译的难度不在代码本身，而在于网络。后续将分享，及踩坑时的逆向思维。关于Ambari 编译报错可以直达（最后一次更新时间：2024年3月24日20:41分）
bigtop:Apache Bigtop的镜像
03-07
Apache Bigtop的主要目标是围绕Apache Hadoop相关项目的打包和互操作性测试建立一个社区。 这包括社区开发的各个级别的测试（打包，平台，运行时，升级等），重点是整个系统，而不是单个项目。 立即开始BigTop的...
nexus maven
11-12
nexus maven 私服 linux 文件 nexus-2.11.2-03-bundle.tar.gz 下载解压后有：nexus-2.11.2-03-bundle.tar.gz
使用nexus搭建Maven私服
weixin_34197488的博客
08-12 261
----------------------------------------------------------------------------------------------[版权申明：本文系作者原创，转载请注明出处]文章出处：http://blog.csdn.net/sdksdk0/article/details/52190619作者：...
如何给Maven添加阿里云镜像
最新发布
tyxjolin的专栏
08-29 832
【代码】如何给Maven添加阿里云镜像。
maven--私服的搭建（Nexus的使用）
热门推荐
粉末无颜的专栏
06-13 16万+
私服是什么 私服，私有服务器，是公司内部Maven项目经常需要的东东，不总结一下，不足以体现出重视。Nexus是常用的私用Maven服务器，一般是公司内部使用。下载地址是http://www.sonatype.org/nexus/go。默认端口8081,这里我选择最新版nexus-2.5.0-04。 常用功能 Nexus常用功能就是：指定私服的中央地址、将自己的Maven项目指定到私
maven 之nexus
陈安志的博客
01-11 311
博客原文地址(http://blog.163.com/benbenfafa_88/blog/static/6493016220130451915187/)  1、 为什么使用Nexus 如果没有私服，我们所需的所有构件都需要通过maven的中央仓库和第三方的Maven仓库下载到本地，而一个团队中的所有人都重复的从maven仓库下 载构件无疑加大了仓库的负载和浪费了外网带宽，如果网速慢的
创建一个maven项目以及Sonatype Nexus私服使用
qq_41104439的博客
03-28 765
1.下载nexus软件（官网太慢，csdn找的）并解压，nexus-3.45.1-01-win64\nexus-3.45.1-01\bin目录中的nexus.exe就是启动器。在项目的pom.xml中添加私服的上传路径（这里的id应该与上述setting.xml中的id保持一致，name可以随便取）若私服不允许匿名访问，则需要在setting.xml中再添加一下用户登录信息（这里的id需要跟上面截图中的保持一致）在setting.xml中添加私服路径（id和name可以随便取，url从私服获取）
Bigtop-Manager 是一个用于管理 Bigtop 组件的平台
02-27
5. **构建和部署工具**：如Maven、Gradle等，用于编译、测试和打包应用。 6. **示例或模板**：供用户参考和快速入门。 了解并掌握Bigtop-Manager的使用，不仅可以提升大数据集群的管理效率，还可以加深对大数据生态...
bigtop
03-19
Bigtop是一个用于开发Apache Hadoop生态系统的打包和测试的项目。 Bigtop的主要目标是围绕Hadoop相关项目的打包和互操作性测试建立一个社区。这包括社区开发的各个级别的测试（打包，平台，运行时，升级等），重点是...
bigtop.list
03-05
Bigtop是一个用于开发Apache Hadoop生态系统的打包和测试的项目。 Bigtop的主要目标是围绕Hadoop相关项目的打包和互操作性测试建立一个社区。 这包括社区开发的各个级别的测试（打包，平台，运行时，升级等），重点...
【maven】Nexus使用
03-27
NULL 博文链接：https://zybing.iteye.com/blog/1167288
nexus之maven搭建
lys1695227550的博客
07-14 165
下载与安装 地址https://help.sonatype.com/repomanager3/release-notes/2019-release-notes nexus-3.17.0-01-win64.zip（测试使用的版本） 解压后 进入 添加系统环境变量D:\package\nexus-3.17.0-01-win64\nexus-3.17.0-01\bin 在bin目录下...
使用Nexus搭建Maven私服
chuyouyinghe的专栏
01-10 3095
序言 maven私服类似.net中的nuget包服务器 官网/版本收费 首先要吐槽官网慢的一比，下载不下来。 地址：Software Supply Chain Security - DevSecOps Governance | Sonatype 下载地址：Nexus Repository Manager - Software Component Management | Sonatype 版本/收费/免费：Nexus Repository Manager 仓库管理有2个版本，专业版和oss版，o
使用nexus搭建maven私服
coder learner
01-25 5055
使用nexus搭建maven私服国内访问maven仓库速度渣渣，公司访问外网速度不快，即使用阿里云镜像效果也不佳。在局域网内搭建Maven私服，除了能从私服加速下载jar包，还能将内部通用模块发布在私服上供其他同事使用。对内部项目部署很有帮助。 安装和启动nexus下载nexus-2.14.2-01-bundle.tar.gz https://www.sonatype.com/download-o
Nexus 搭建Maven 私服
进阶的Typist的博客
06-28 273
Nexus 搭建Maven 私服欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如
nexus搭建maven私服
tca0819的博客
06-06 353
1.下载nexus 地址：https://www.sonatype.com/download-oss-sonatype 2.安装nexus  第一步：解压  第二步：进入nexus-2.14.5-02/bin目录，执行nexus命令，再执行nexusinstall命令，最后执行nexus start命令启动服务。（也可在服务管理里手动启动）  第三步：验证：打开浏览器，访问：http://loca...
ambari+bigtop大数据平台安装部署指南
07-27
而Bigtop是一个Apache软件基金会下的开源项目，主要用于构建，测试和部署大数据平台。 Ambari Bigtop大数据平台安装部署指南主要包括以下几个步骤： 1. 准备工作：在开始安装之前，需要确保系统已经安装了合适的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值