Storm通过rJava调用R脚本的环境配置

Storm Bolt中通过rJava调用R脚本时,需要配置本地的R环境及修改Storm的环境。

1、本地R配置
系统安装R语言, HDP-UTILS中提供R的安装包,将这些包配置本地yum源
# yum install R
重新配置R的java环境变量
# R CMD javareconf
进入R中安装rJava或者本地安装
# R CMD INSTALL rJava_0.9-8.tar.gz
R中测试rJava,没有错误说明安装成功
> library(rJava)

2、设置strom环境
修改Advanced storm-site页签下java.library.path参数,新增参数值
:/usr/lib64/R/library/rJava/jri
修改节点storm配置目录下的storm-env.sh,在JAVA_HOME下新增内容
export R_HOME=/usr/lib64/R

问题:
a)缺少jri依赖的包
将依赖的jri-0.8.8-osx.jar拷贝到/usr/hdp/2.6.1.0-129/storm/extlib目录下
b)R脚本执行过程会出现找不到安装包的情况
R中执行".libPaths()”查看安装包所造所有路径,可以通过以下方法调试:
test2<- function(args2){
msg <- tryCatch({
   json <- fromJSON(args2)
   jsonResult <- toJSON(json)
   return(as.character(jsonResult))
  }, error = function(e) {
    e
  })
  return(paste(msg, collapse = "\n"))
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值