搭建大数据分析平台（JAVA环境配置）

搭建大数据分析平台（JAVA环境配置）

当前的大数据分析任务主要采用Hadoop和Spark相结合作为运行平台,其中Spark利用HDFS作为大数据分析输人源以及利用YARN作为Spark分析任务的资源调度器。本节主要从实践的角度讲述如何结合大数据分析工具进行大数据分析，所讲解的例子既可以使用Hadoop,也可以使用Spark,因为相关的丽数调用上述两种大数据系统都可以实现。为了不再增加部署Spark的麻烦,本节主要采用Hadoop作为运行环境，下面讲述Hadoop等的安装。
http://www.oracle.com/technetwork/java/javase/downloads/index.html

点击红色方框中的JDK Download链接

可以找到deb/tar两个类型的文件进行下载
放大选项

切到所下载的jdk环境包文件夹


注：此处报错是因为ubuntu无法安装rpm包，此处应该把rpm转换成deb为最快方法，但是以下也有java的tar配置方法
解决方法一：
安装rpm包，在里面安装一个alien
或者
方法二：直接下载一个tar格式的

进入漫长得等待

把apm安装包转化成deb（中间失败过两次但是最后还是成功）

Java的安装

找到tar格式的压缩包

勾选

点击下载

jdk配置步骤
把下载到的jdk移动到安装文件中，然后按照如下的步骤进行安装：
cd 桌面 # 定位到jdk压缩包所在的目录

sudo cp /home/ym/桌面/jdk-14.0.1_linux-x64_bin.tar.gz /opt
解压缩jdk，得到文件夹jdk-14.0.14

sudo tar -xzvf jdk-14.0.1_linux-x64_bin.tar.gz
把jdk复制到指定的jdk安装目录

sudo rm jdk-14.0.1_linux-x64_bin.tar.gz
这时jdk压缩包已经没用了，删除掉它

至此，jdk的安装已经完成一半了接下来是配置jdk
配置的步骤如下：
打开系统级的配置文件profile

sudo vi /etc/profile
在文件的末尾添加如下的配置内容
JAVA_HOME=/opt/jdk-14.0.1 # 配置内容
CLASSPATH=.
PATH=$JAV{A}_{H}OME/bin:$PATH
export JAVA_HOME CLASSPATH PATH

使修改的配置生效

source /etc/profilec
输入如下的命令可查看到或创建或更新的环境变量
查看环境变量的值；
echo $JAVA_HOME
echo $CLASSPATH
echo $PATH

ubuntu换源
下载很慢是因为ubuntu用的是国外的源，所以我们换源
点击软件更新

选择源代码下的中国的服务器

选择阿里云

输入密码进行用户认证

换完后进行安装



执行java -version查看java版本



测试jdk是否安装成功
打开一个终端键入：java -version、javac -version这两个命令，如果出现以下的关于Java和Java编译器的版本信息，则说明jdk已安装成功，也说明了系统环境变量已配置成功

第一个Java程序
代码：

```java

```java
`HelloWorld.java`
public class HelloWorld {
    // Java程序的入口方法，程序将从这里开始执行
    public static void main(String[] args) {
        // 向控制台打印一条语句
        System.out.println("Hello World");
    }
}

编辑、编译以及运行HelloWorld.java程序的步骤：
• 打开代码编辑器，把上面的代码添加进去，并把文件名保存为：HelloWorld.java；
• 打开一个终端，进入目标文件所在的位置，本系统的是/home/ym/桌面；
• 输入程序编译命令： javac HelloWorld.java，按下回车键对程序进行编译，即可生成字节码文件：HelloWorld.class。如果代码没有错误，命令提示符会进入下一行（前提是系统环境变量都已设置好了）；
• 输入程序运行命令：java HelloWorld，并按下回车键即可运行程序。

关于JAVA环境卸载

cd /opt 进入jdk的安装目录

sudo rm -rf jdk-14.0.1 卸载jdk