flink
Nougats
这个作者很懒,什么都没留下…
展开
-
Flink local模式运行SocketWordcount
local模式启动flink./bin/start-local.sh查看启动日志tail log/flink-*-jobmanager-*.log启动netcat作为本地服务器生产数据nc -l 9000提交flink程序,该程序会连接socket,等待输入数据./bin/flink run examples/streaming/SocketWindowWordCount.jar --port 90原创 2017-06-11 21:52:36 · 3110 阅读 · 0 评论 -
Flink 集群模式部署
配置主节点jobmanager.rpc.address: masterjobmanager.heap.mb和taskmanager.heap.mb可以配置JVM分配给各节点的内存大小,单位MBslaves配置Worker节点slave1 slave2启动集群bin/start-cluster.sh停止集群stop-cluster.sh对运行中的集群进行添加/删除JobManager操作bin/job原创 2017-06-11 22:28:10 · 949 阅读 · 0 评论 -
Flink Yarn配置
需要配置YARN_CONF_DIR 或 HADOOP_CONF_DIR环境变量启动一个YARN session(Start a long-running Flink cluster on YARN) 然后便可以向集群提交作业。同一个Session中可以提交多个Flink作业./bin/yarn-session.sh -n 2 -tm 1024 -s 2上面命令启动了2个TaskManager,每个原创 2017-06-11 23:51:01 · 2129 阅读 · 0 评论