Flink学习笔记(二):安装Flink

本文档详细介绍了在Linux-CentOS6.5环境下,如何安装和配置Flink集群,包括下载匹配Hadoop版本的Flink安装包,上传并解压,修改环境变量和配置文件,启动standalone模式的Flink集群,并通过运行自带的词频统计项目验证集群正确运行。
摘要由CSDN通过智能技术生成
1.运行环境
  • Linux-CentOS6.5
  • JDK-1.8
  • hadoop-2.4.1

集群规划:搭建四个节点的集群,各主机角色规划如下:
hadoop04:JobManager
hadoop03:TaskManager
hadoop02:TaskManager
hadoop01:TaskManager

2.下载安装包

下载flink安装包,注意选择一个与hadoop版本匹配的包。
在这里插入图片描述

3.上传、解压安装包

在hadoop04主机上创建目录:

[hdp@hadoop04 ~]$ mkdir /home/hdp/app/flink

上传安装包到该目录下,解压:

[hdp@hadoop04 flink]$ tar -zxvf flink-1.7.2-bin-hadoop24-scala_2.11.tgz

修改环境变量(只需要在需要提交任务的节点上修改):

[hdp@hadoop04 flink]$ sudo vim /etc/profile

在profile中加入两行:

export FLINK_HOME=/home/hdp/app/flink/flink-1.7.2
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$JAVA_HOME/bin:$SPARK_HOME/bin:$SPARK_HOME/sbin:$ZOOKEEPER_HOME/bin:$KAFKA_HOME/bin:$FLINK_HOME/bin

然后source环境变量:

[hdp@hadoop04 flink]$ source /etc/profile
4.修改配置

进入[flink-home]/conf目录下,需要修改的配置文件为flink-conf.yaml、slaves

4.1 flink-conf.yaml配置
基础配置

# jobManager 的IP地址
jobmanager
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值