- 博客(8)
- 资源 (1)
- 收藏
- 关注
原创 Flink: Job submission failed
原因:提交flink程序给Yarn时无法形成jobgraph可能由于jobgraph过大,jobmanager内存不足引起,可增大jobmanager内存 可能形成flink web在时间内没启动好,可在flink配置文件把web.timeout参数调大 web.timeout: 1000000akka.client.timeout:600sakka.ask.timeout:600s...
2019-07-24 09:49:19 1415
原创 Kafka常用操作
1.Kafka监控kafka-manager: https://github.com/yahoo/kafka-manager2.启动Kafka## 启动zookeeperbin/zkServer.sh start## 打开zk客户端查询bin/zkCli.sh -server dsjcx1:2181,dsjcx2:2181,dsjcx3:2181## 启动kafkabin/ka...
2019-07-24 09:15:27 289
原创 Git常用命令
#1.生成ssh key,可在~/.ssh目录查看ssh-keygen -t rsa -C "hua.yh@dtwave-inc.com"#2.把公钥id_rsa.pub填到(copy到)gitlab的SSH KEYS上#手动复制粘贴or 命令式pbcopy < ~/.ssh/id_rsa.pub#3.ssh命令测试通过ssh -T -p 30001 hua.yh@gitlab...
2019-07-18 10:38:53 141
原创 Python多进程示例
#!/usr/bin/env python# -*- coding:utf-8 -*-''' @author:yann @datetime:2019/1/29 3:50 PM'''import urllib2import jsonimport hashlibimport MySQLdbimport sysimport multiprocessingfrom date...
2019-07-18 10:34:02 191
原创 Flink的执行计划Execution Plan Visualization
一、生成执行计划方式一:用flink info命令执行自己对应的jar包 如bin/flink info examples/test.jar 方式二:在代码中加入 env.getExecutionPlan把上述任一方式执行产生的json复制出来二、查看执行计划打开生成flink执行计划的网站https://flink.apache.org/visualizer/ 并把json...
2019-07-17 22:53:19 884
原创 知网——杭州图书馆
在杭州缴纳过社保的杭州图书馆默认会为其开通账号进入杭州图书馆https://www.hzlib.net/ 点击登录 卡号为身份证号,初始密码为身份证9-14位3. 进入后,点击 电子资源----》更多----》中国知网CNKI4. 可以通过新版或者旧版进入知网官网5. 可以尽情在知网下载论文了。...
2019-07-09 19:02:37 8688 2
原创 Linux常用命令
linux# mac常用vimgg 第一行G 最后一行^ (shift+6) 行首$(shift+4)行尾u 撤消操作ctrl+r 恢复上一步的撤销操作open . # 打开当前目录、文件open -n /Applications/Safari.app/ # 开启新Safari窗口caffeinate -t 3600 # 一小时不进入睡眠状态purge # 清除内存和...
2019-07-09 19:02:05 99
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人