- 博客(2)
- 资源 (16)
- 收藏
- 关注
原创 spark streaming 调试技巧
spark streaming 如果以local 模式运行,log日志非常清楚。如果log 日志是运行在yarn 模式下,driver 的日志可以通过reource manager 日志看到。但是executor的日志却看不到,我们往往错误都发生在executor里,比如典型的错误:如果我们连接hbase去存取数据的话,我们会在driver里初始化了连接,缺忽略的excutors里,导致程序出错
2015-04-29 11:58:20 9413 2
原创 一个spark receiver 或多个spark receiver 接收 多个flume agent
利用一个spark receiver 接收多个flume agentString host = args[0]; int port = Integer.parseInt(args[1]); String host1 = args[2]; int port1 = Integer.parseInt(args[3]); InetSocketAddress address1 = new Ine
2015-04-08 16:54:09 5011
Silverlight3 HitTest 的2个比较好的例子
2010-04-15
CLR via C# (pdf)
2009-11-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人