01 在CentOS7中安装flink

数据分两类,一类是静态处理,多做批量处理,属于OLAP,一类是流式数据,多做实时处理,属于OLTP。Spark Streaming属于微批处理,并非真正意义上的实时处理。本节将介绍一个顶级的流处理框架Flink。

1 系统、软件以及前提约束

2 操作

  • 1 解压
# 进入家目录
cd
# 解压
tar -xvf flink-1.2.1-bin-hadoop2-scala_2.10.tgz
  • 2 启动
# 进入flink的启动目录
cd /root/flink-1.2.1/bin
# 启动
./start-local.sh
  • 3 测试
    在浏览器中输入http://192.168.100.200:8081查看flink界面
  • 4 运行自带词频统计demo
# 打开一个xshell窗口,登录,执行nc,监听8888
nc -lk 8888
# 进入flink启动目录
cd /root/flink-1.2.1/bin
# 执行词频统计
./flink run /root/flink-1.2.1/examples/streaming/SocketWindowWordCount.jar  --port 8888
# 打开一个xshell窗口,登录,查看日志
cd /root/flink-1.2.1/log
# 查看日志【注意作者的机子名称为danji,因此日志文件中包含danji】
tail -f flink-root-jobmanager-0-danji.out

在nc窗口输入字符串,在查看日志窗口就能看到统计的结果。
以上,就是在CentOS7中安装flink,并且运行自带词频统计的过程。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值