笔记:DataSphere Studio安装部署流程

一、标准版部署

标准版:有一定的安装难度,体现在Hadoop、Hive和Spark版本不同时,可能需要重新编译,可能会出现包冲突问题。

适合于试用和生产使用,2~3小时即可部署起来。

支持的功能有:

数据开发IDE - Scriptis

工作流实时执行

信号功能和邮件功能

数据可视化 - Visualis

数据质量 - Qualitis(单机版)

工作流定时调度 - Azkaban(单机版)

Linkis管理台

二、基础环境准备

2.1、基础软件安装

下面的软件必装:

MySQL (5.5+),如何安装MySQL

JDK (1.8.0_141以上),如何安装JDK

Python(2.x和3.x都支持),如何安装Python

Nginx,如何安装Nginx

下面的服务必须可从本机访问:

Hadoop(2.7.2,Hadoop其他版本需自行编译Linkis)

Hive(1.2.1,Hive其他版本需自行编译Linkis)

Spark(支持2.0以上所有版本)

a、安装MySQL

1、安装前,检测系统是否自带安装 MySQL:

	rpm -qa | grep mysql

2、如果你系统有安装,那可以选择进行卸载:

	rpm -e mysql  // 普通删除模式
	rpm -e --nodeps mysql  // 强力删除模式,如果使用上面命令删除时,提示有依赖的其它文件,则用该命令可以对其进行强力删除

3、下载MySQL的rpm包

	wget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm

4、进行repo安装

	rpm -ivh mysql57-community-release-el7-9.noarch.rpm

5、进入/etc/yum.repos.d执行

	yum install mysql-server

6、启动MySQL

	systemctl start mysqld

7、查看MySQL初始密码

	grep 'password' /var/log/mysqld.log

8、修改密码

	mysql -u root -p

	set global validate_password_policy=0;
	set global validate_password_length=1;
	ALTER USER 'root'@'localhost' IDENTIFIED BY '你的密码';

如果无法登录:Linux初次登陆、重置MySQL密码步骤,以及错误Unknown column ‘password’ in 'field list’的解决方法

9、设置远程访问

	GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '你的密码' WITH GRANT OPTION;

释义:原文链接:https://blog.csdn.net/u010953706/article/details/95985946

b、安装JDK

1、查看系统是否安装java

  java -version

如果有

 rpm -qa | grep java

这几个可以删除

java-1.7.0-openjdk-1.7.0.261-2.6.22.2.el7_8.x86_64
java-1.7.0-openjdk-headless-1.7.0.261-2.6.22.2.el7_8.x86_64
java-1.8.0-openjdk-1.8.0.262.b10-1.el7.x86_64
java-1.8.0-openjdk-headless-1.8.0.262.b10-1.el7.x86_64

删除 

rpm -e --nodeps java-1.7.0-openjdk-1.7.0.261-2.6.22.2.el7_8.x86_64

如果没有权限,进入root再执行

su root

检查是否删除成功:提示未找到命令

java -version

2、下载JDK

最新版本下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html

历史版本下载地址:  http://www.oracle.com/technetwork/java/javase/archive-139210.html

3、到 /usr目录下新建一个java文件夹,将下载的JDK放入java文件夹,解压JDK

cd /usr  //转到usr目录

mkdir java  //新建java文件

cp /下载的JDK位置/JDK /usr/java/   //复制文件夹到目标位置

tar -zxvf jdk-8u181-linu
  • 2
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值