1.环境准备
官网地址:http://streamxhub.com/docs/intro
预先安装:
- jdk
- hadoop
- flink
- mysql
2.部署streamx
- 下载安装包:https://github.com/streamxhub/streamx/releases
- 解压,配置环境变量:
export JAVA_HOME=/data/services/jdk-8u41
export HADOOP_HOME=/data/services/hadoop-3.2.2
export FLINK_HOME=/data/services/flink-1.13.6
export HADOOP_CLASSPATH=`hadoop classpath`
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$FLINK_HOME/bin
- 修改连接信息,conf/application.yml:
# 配置web页面访问端口
# 在第二行,默认端口为10000,可以根据其余服务使用情况来配置端口
server:
port: 9999
# 配置默认数据源(在第46行左右,配置MySQL数据库访问信息):
datasource:
# 数据源-1,名称为 primary
primary:
username: xxx
password: xxx
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://xxx:3306/streamx?useSSL=false&useUnicode=true&characterEncoding=UTF-8&useJDBCCompliantTimezoneShift=true&useLegacyDatetimeCode=false&serverTimezone=GMT%2B8
# 配置Hadoop信息和本地的工作空间(在第81行左右,配置hadoop的访问用户和本地以及hdfs的工作空间):
streamx:
hadoop-user-name: hadoop
# 本地的工作空间,用于存放项目源码,构建的目录等.
workspace:
local: /data/services/streamx-console-service-1.2.3/data
remote: hdfs://vmcluster/data/streamx # support hdfs:///streamx/ 、 /streamx 、hdfs://host:ip/streamx/
- 初始化配置表:
CREATE DATABASE `streamx` CHARACTER SET utf8 COLLATE ;utf8_general_ci;
use streamx;
source /opt/module/streamx/script/final.sql
- 启动服务:
/opt/module/streamx/bin/startup.sh
- 查看webui:
http://xxx:9999/
默认用户名: admin
默认密码: streamx
配置飞书报警
配置飞书报警后,发送报警报错:the trustAnchors parameter must be non-empty,主要是证书问题,参考:https请求,jdk安装证书