R语言用snow包并行计算代码记录(未完成)

library(snow)
library(RMySQL)

#read info from sql

sql_data<-"select * from info_zx"
conn<-dbConnect(MySQL(),user="",password="",dbname="",host="")  #开启数据库连接
data_info<-dbGetQuery(conn,sql_data)   #获得原始数据   
dbDisconnect(conn)  #关闭数据库连接

#提取zx的mpid
mp_id <- data_info[,1]

#打开20个线程
cl <- makeSOCKcluster(rep('localhost',20))

#library
clusterEvalQ(cl,source('./library.R'))
clusterEvalQ(cl,source('./trainAndtest.R'))


timeInfo <- system.time(

  clusterApplyLB(cl,mp_id,trainAndtest(mp_id))

)

#有的数据有错运行会出错统计哪些没有计算(未完成)
files <- dir('./')
files <- as.numeric(files) 

运行时间

> timeInfo
   user  system elapsed 
  0.052   0.056  25.596 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值