Third Party Jars for Storm Cluster

近几日写的Storm集群应用需要用到java本地调用,调用中科院的分词工具统计微博信息。当然,很简单的一个应用,但是在本地调用Native Method上面出现了各种问题,解决后还有第三方库的调用问题。
当然,用eclipse进行storm本地模式的编译运行基本是没什么问题的,因为可以手动添加classpath。但是一旦倒出jar包,那么在storm集群上的运行可能就会出现第三方jar包找不到的问题。可以试一下以下几种方式。

  1. 如果你只需要一个第三方库(或者不多),那么之间将集群的每台节点上面的CLASSPATH添加上你需要的jar的路径。
  2. 将jar拷贝到storm lib中。一般是 $STORM_HOME/lib。
  3. 如果还不行,不妨试一下编辑$STORM_HOME/conf下面的storm.yaml文件,加入 java.library.path: “/usr/local/lib:/opt/local/lib:/usr/lib:你的lib目录”。
    注意,”:”后面有一个空格,java.library.path前面也有空格。

不管怎样,我经过N次调试,算是成功了。
PS,尽量还是不要做用java调c这样麻烦的事情最好!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值