Apache Flink架构安装

一.     简介

Apache Flink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和Scala编写的分布式流数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序,Flink的流水线运行时系统可以执行批处理和流处理程序。此外,Flink的运行时本身也支持迭代算法的执行

 

二.  下载

官网地址:https://flink.apache.org/downloads.html

最新版本已是1.8.0,我们使用得较最新版本得上一版本flink-1.7.2-bin-scala_2.11.tgz

 

三.  安装配置

共有安装得配置是JDK1.8

 

  1. 1.  单节点

进入目录/opt/module/flink-1.7.2/conf

a.  修改masters、salaves中得localhost为当前得主机名

b.  修改flink-conf.yaml得33行和52行

  1. a)  jobmanager.rpc.address:bigdata111(原localhost)

  2. b)  taskmanager.numberOfTaskSlots:2 (原1个)

c.  开启集群:进入/opt/module/flink-1.7.2/bin

d.  启动:start-cluster.sh

 

  1. 2.  集群模式

a.  拷贝flink-1.7.2到其他服务器

  1. a)  scp -rflink-1.7.2/ root@bigdata112:/opt/module/

  2. b)  scp -rflink-1.7.2/ root@bigdata113:/opt/module/

b.  修改每台服务器得slaves为bigdata112和bigdata113

c.  开启集群:进入/opt/module/flink-1.7.2/bin

d.  启动:start-cluster.sh

 

四.  页面展示

IP:8081 比如192.168.1.101:8081

转载地址:https://mp.weixin.qq.com/s?__biz=Mzg2MTA1ODcyNg==&mid=2247484037&idx=1&sn=bb8362106d817c769f3632ec57e7513f&chksm=ce1da14cf96a285af431e28bed7876681c36b172bbcf00ab462537654b27010ce4a4271c2a96&mpshare=1&scene=23&srcid=0411oO5b30DidOnDtzzs2x9k#rd

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值