Flink on Yarn三部曲之二:部署和设置

  1. 部署成功如下图所示:

在这里插入图片描述

重启CDH服务器

由于修改了selinux和swap的设置,需要重启操作系统才能生效,因此请重启CDH服务器;

执行ansible脚本启动CDH服务(ansible电脑)

  1. 等待CDH服务器重启成功;

  2. 登录ansible电脑,进入~/playbooks目录;

  3. 执行初始化数据库和启动CDH的脚本:ansible-playbook cdh-single-start.yml

  4. 启动完成输出如下信息:

在这里插入图片描述

  1. ssh登录CDH服务器,执行此命令观察CDH服务的启动情况:tail -f /var/log/cloudera-scm-server/cloudera-scm-server.log,看到下图红框中的内容时,表示启动完成,可以用浏览器登录了:

在这里插入图片描述

设置(浏览器操作)

现在CDH服务已经启动了,可以通过浏览器来操作:

  1. 浏览器访问:http://192.168.50.134:7180 ,如下图,账号密码都是admin:

在这里插入图片描述

  1. 一路next,在选择版本页面选择60天体验版:

在这里插入图片描述

  1. 选择主机页面可见CDH服务器(deskmini):

在这里插入图片描述

  1. 在选择CDH版本的页面,请选择下图红框中的5.16.2-1:

在这里插入图片描述

  1. 进入安装Parcel的页面,由于提前上传了离线parcle包,因此下载进度瞬间变成百分之百,此时请等待分配、解压、激活的完成:

在这里插入图片描述

  1. 接下来有一些推荐操作,这里选择如下图红框,即可跳过:

在这里插入图片描述

  1. 接下来是选择服务的页面,我选择了自定义服务,然后选择了HDFS、YARN、Zookeeper这三项,可以满足运行Flink的需要:

在这里插入图片描述

  1. 在选择主机的页面,都选择CDH服务器:

在这里插入图片描述

  1. 接下来是数据库设置的页面,您填写的内容必须与下图保持一致,即主机名为localhost,Activity Monitor的数据库、用户、密码都是amon,Reports Manager的数据库、用户、密码都是rman,这些内容在ansible脚本中已经固定了,此处的填写必须保持一致:

在这里插入图片描述

  1. 在设置参数的页面,请按照您的硬盘实际情况设置,我这里/home目录下空间充足,因此存储位置都改为/home目录下:

在这里插入图片描述

  1. 等待服务启动:

在这里插入图片描述

  1. 各服务启动完成:

在这里插入图片描述

YARN设置

默认的YARN参数是非常保守的,需要做一些设置才能顺利执行Flink任务:

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值