- 博客(2)
- 收藏
- 关注
转载 spark direct kafka 将offset推到zookeeper
1、spark streamingdirect方式读取kafka性能要好很多,缺点是它不会去zookeeper更新offset,这将导致 基于zk的KafkaOffsetMonitor监控失效。由于我们流处...
2016-09-30 15:56:31 128
转载 hadoop linux inode 相关
起因: 近期spark集群执行任务时有stage抛出异常: java.io.IOException: Failed to create local dir in /mnt/yarn...
2016-09-19 14:28:23 252
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人