apache flink的安装

本文档详细介绍了在Linux环境下安装Apache Flink的步骤,包括选择对应Hadoop版本的下载链接,解压安装包,配置JAVA_HOME和SSH,设置Flink配置文件如jobmanager和taskmanager的相关参数,内存管理和slaves配置,以及启动和监控Flink集群的方法。
摘要由CSDN通过智能技术生成

 这里是linux版本的安装

 

1:下载地址:

http://www.apache.org/dyn/closer.lua/flink/flink-1.5.0/flink-1.5.0-bin-hadoop28-scala_2.11.tgz

 可以选择版本下载,,按照自己对应的hadoop的版本进行下载

2  tar  -zxvf   安装包 进行解压

3 需要配置JAVA_HOME 和SSH免密登陆 (这点忽略)

4 cd flink/conf  进行配置

         jobmanager.rpc.address:localhost1   --jobManager 的IP地址

 

     jobmanager.rpc.port: 6123  --jobManager 的端口,默认为6123

 

     jobmanager.heap.mb --jobManager 的JVM heap大小  

 

 taskmanager.heap.mb  --taskManager的jvm heap大小设置

 

 taskmanager.numberOfTaskSlots --taskManager中taskSlots个数,最好设置成work节点的CPU个数相等

 

 parallelism.default  --并行计算数

 

 fs.default-scheme --文件系统来源

 

 fs.hdfs.hadoopconf:  --hdfs置文件路径

 

    jobmanager.web.port    --j

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值