linux安装hadoop生态圈之SBT安装

最新推荐文章于 2022-10-18 00:33:39 发布
置顶 最新推荐文章于 2022-10-18 00:33:39 发布
阅读量275 收藏
点赞数 1
分类专栏： hadoop 文章标签： sbt
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36993547/article/details/103058884
版权

安装sbt

本文方法很简单 很简单

centos 6.5
sbt  1.3.3

Spark中没有自带sbt，需要手动安装sbt，我的方法是先安装sdk再安装sbt

$ curl -s "https://get.sdkman.io" | bash
$ source "$HOME/.sdkman/bin/sdkman-init.sh"
$ sdk version

在这里插入图片描述

Then

sdk install sbt
sbt sbtVersion #显示版本需要启动时候安装一些东西，所以需要等待一些时间，等下载完相关依赖

收工！！

你赞赞 ，我赞赞，世界是如此美好

@~~~~小飞
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
手动安装Scala以及编译工具sbt(Mac)
fxtxz2的专栏
06-15 716
mac上面手动安装scala
(Linux+IDEA+scala+sbt)sbt下载依赖包速度慢解决办法（亲测可用）
frank的博客
03-05 6707
最近使用IDEA学习scala，下载了scala和sbt插件，发现sbt下载依赖包的速度非常那个慢，每次新建项目和build.sbt修改后同步sbt就特别慢，于是就上网找了各种解决办法，综合许多博主的内容，加上我自己的理解，给大家分享一下我的解决办法。首先，在sbt官网下载，解压，配置环境变量PATH和SBT_HOME。sbt是scala的构建工具，就像maven对与java一样，maven安装后...
SDK Installation Candidates
五石之瓠 以为大樽 浮于江湖 悠笑人生
10-15 289
Activator http://www.lightbend.com/activator/downloadTypesafe is a GUI/CLI tool to help with building reactive applicaions. It uses sbt (simple build tool) behind the scenes to build, run, and test yo
Sbt——安装、配置、详细使用
blueicex2017的博客
02-18 1万+
一、安装 安装包地址：https://pan.baidu.com/s/1x42iv4MGJBhGhfJ2gt2eVg 提取码：ihyr 不建议用sdkman安装，官网建议用，但考虑到天国的网络状态，还是本地安装吧！ 1.官网yum安装 [root@master sbt]# curl https://bintray.com/sbt/rpm/rpm | tee /etc/yum.repos.d/b...
[Ubuntu 16.04] [Memos] [SDKMAN] install sbt(scala)
与日俱增
11-17 249
1, ctrl+alt+"t"=>Terminal 2, curl -s "https://get.sdkman.io" | bash 3, source "/home/ding/.sdkman/bin/sdkman-init.sh" 4, # sdk help # sdk list # sdk install scala sdk install sbt 5, https:/...
Linux系统上安装Hadoop的详细步骤
03-23
Linux系统上安装Hadoop的详细步骤,该文档详细的描述了在linux上面如何安装hadoop，如何信息配置，初始化，启动hadoop等等，喜欢的朋友可以拿去使用
hadoop基于Linux7的安装配置图文详解
09-14
【Hadoop基于Linux7的安装配置】教程 在本文中，我们将详细介绍如何在Linux7系统上安装和配置Hadoop。Hadoop是一个分布式计算框架，它允许处理和存储大量数据。以下是一步步的安装和配置步骤： 1. **准备工作**： ...
Linux 安装Hadoop.pdf
09-23
【Linux安装Hadoop详解】 在Linux环境下安装Apache Hadoop是一项重要的任务，特别是在大数据处理和分布式计算的场景中。本文将详细解析如何在Linux系统上安装Hadoop 3.3.0，包括必要的环境配置、安装步骤、配置文件...
Linux中安装配置hadoop集群详细步骤
09-15
【Linux中安装配置Hadoop集群详细步骤】 在Linux环境下搭建Hadoop集群是一项复杂但重要的任务，主要用于大数据处理和分析。本文将详细介绍如何在Ubuntu 14.04 64位系统上安装和配置Hadoop 2.7.1版本的集群。 一、...
hadoop生态圈组件搭建全过程
03-12
hadoop生态圈组件搭建全过程，介绍如何安装一套大数据计算框架的过程。
个人安装配置sbt流程及遇到的问题
weixin_51547822的博客
10-18 2133
Linux环境下安装sbt编译并打包Scala代码
Spark快速入门之SBT安装
Master
01-16 1万+
安装sbt本文方法有些繁琐，可以查看github最新更新：用sbt编译spark源码linux版本：CentOS6.7 sbt: 0.13.9 Spark中没有自带sbt，需要手动安装sbt，我的方法是下载sbt-launch.jar，然后将源改为国内源（aliyun），我选择将sbt安装在/usr/local/sbt中。$sudo mkdir /usr/local/sbt $sudo cho
sbt安装
haijiege的专栏
06-12 4974
Spark 中没有自带 sbt，需要手动安装sbt，可在官网https://www.scala-sbt.org/download.html下载，我们这里使用的是sbt-0.13.9.tgz 我们选择安装在 /usr/local/sbt 中：sudo mkdir /usr/local/sbtsudo chown -R hadoop /usr/local/sbt # 此处的 hadoop 为...
从入门到入土 Hadoop新手搭建(3) windows下scala+idea+sbt安装
Lejeune的博客
03-01 1188
从入门到入土 Hadoop新手搭建(3) windows下scala+idea+sbt安装 继前篇hadoop搭建完成后，今后将用scala进行开发，但是我们是ubuntusever,没有图形化界面对我们新手开发并不是很友善，所以我们尝试在windows上先写好代码，再传回虚拟机进行运行。 安装scala 进入scala官网，可以看到有三种安装方式（但是我们开发ide还是要用idea,请自己去下载...
sbt 简介 配置 加速 问题解决
wzq294328238的专栏
04-21 1万+
本文专治： 1.国内“复杂”的网络环境，下载太慢 2.在代理环境下update出错 3.You probably access the destination server through a proxy server that is not well configured其实最好的解决方法是搭建自己的nexus私服，即快即剩网速，请查看我的另一博客 nexus私服搭建详解sbt结构简介sb
sbt使用详解
热门推荐
BlueSky
11-20 2万+
前两天安好的sbt但是在真正的用的时候还是遇到很多问题，所以在系统学习了解下。 安装： 我的系统为centos6.5故采用官方提供的在线安装： curl https://bintray.com/sbt/rpm/rpm > bintray-sbt-rpm.repo sudo mv bintray-sbt-rpm.repo /etc/yum.repos.d/ sudo yum install s
SBT简介
逝无痕——kaidy
03-31 1万+
文章目录一、关于SBT二、为什么使用SBT三、SBT工程目录结构四、SBT交互模式 一、关于SBT SBT是一个现代构建工具。它是用Scala编写的，并且针对Scala也提供了很多方便快捷的功能。它也是一个通用的构建工具。 二、为什么使用SBT 强大的依赖管理功能 Ivy用来管理依赖 一个只会根据需求更新的模型 所有任务的创建都支持Scala 可连续执行命令 可以在工程的上下文里启动REP...
Flink开发需要的环境
SunnyRivers
06-13 3670
运行环境介绍 Flink执行环境主要分为本地环境和集群环境，本地环境主要为了方便用户编写和调试代码使用，而集群环境则被用于正式环境中，可以借助Hadoop Yarn或Mesos等不同的资源管理器部署自己的应用。 环境依赖 （1）JDK环境 Flink核心模块均使用Java开发，所以运行环境需要依赖JDK，本书暂不详细介绍JDK安装过程，用户可以根据官方教程自行安装，其中包括Windows和Lin...
sbt安装与配置
朱小厮的博客
11-02 1万+
下载地址：http://www.scala-sbt.org/download.html 当前版本：sbt-0.13.13.tgz 安装 1.解压并赋予权限 [root@hidden util]# tar -zxvf sbt-0.13.13.tgz sbt-launcher-packaging-0.13.13/ sbt-launcher-packaging-0.13.13/conf...
Linux安装hadoop
最新发布
05-05
在Linux上安装Hadoop可以按照以下步骤进行： 1. 首先，确保你已经在Linux系统上安装了Java Development Kit（JDK）。Hadoop是用Java编写的，所以需要先安装Java环境。 2. 下载Hadoop的二进制文件。你可以从Hadoop官方网站（https://hadoop.apache.org/）下载最新版本的Hadoop。 3. 解压下载的Hadoop压缩包。使用以下命令解压： ``` tar -xzvf hadoop-x.x.x.tar.gz ``` 4. 将解压后的Hadoop文件夹移动到你想要安装的目录。例如，可以将其移动到`/usr/local`目录下： ``` sudo mv hadoop-x.x.x /usr/local/hadoop ``` 5. 配置Hadoop环境变量。编辑`~/.bashrc`文件，并添加以下内容： ``` export HADOOP_HOME=/usr/local/hadoop export PATH=$PATH:$HADOOP_HOME/bin ``` 6. 使环境变量生效： ``` source ~/.bashrc ``` 7. 配置Hadoop的核心文件。进入Hadoop的安装目录，并编辑`etc/hadoop/hadoop-env.sh`文件，设置Java环境变量： ``` export JAVA_HOME=/path/to/java ``` 8. 配置Hadoop集群的相关文件。主要包括`core-site.xml`、`hdfs-site.xml`和`mapred-site.xml`。这些文件位于`etc/hadoop`目录下。你可以根据自己的需求进行配置，例如设置Hadoop的工作目录、数据存储目录、日志目录等。 9. 格式化Hadoop文件系统。使用以下命令格式化HDFS： ``` hdfs namenode -format ``` 10. 启动Hadoop集群。使用以下命令启动Hadoop： ``` start-all.sh ``` 至此，你已经成功在Linux上安装并启动了Hadoop。你可以通过访问Hadoop的Web界面（默认为http://localhost:50070）来验证Hadoop是否正常运行。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值