R语言在hadoop的线性回归的可用代码

最新推荐文章于 2020-01-19 20:19:36 发布

weixin_33872660

最新推荐文章于 2020-01-19 20:19:36 发布

阅读量141

点赞数

文章标签：大数据 r语言数据结构与算法

原文链接：https://my.oschina.net/thomas2/blog/609136

版权

2019独角兽企业重金招聘Python工程师标准>>>

X=matrix(rnorm(20000),ncol=10)

X.index=to.dfs(cbind(1:nrow(X),X))

y=as.matrix(rnorm(2000))

Sum=function(.,YY)

  keyval(1,list(Reduce('+',YY)))

XtX=values(

  from.dfs(

    mapreduce(

      input=X.index,

      map=function(.,Xi){

        yi=y[Xi[,1],]

        Xi=Xi[,-1]

        keyval(1,list(t(Xi) %*% Xi))

      },

      reduce=Sum,

      combine=TRUE)))[[1]]

Xty=values(

  from.dfs(

    mapreduce(

      input=X.index,

      map=function(.,Xi){

        yi=y[Xi[,1],]

        Xi=Xi[,-1]

        keyval(1,list(t(Xi) %*% yi))

      },

      reduce=Sum,

      combine=TRUE)))[[1]]

 solve(XtX,Xty)

转载于:https://my.oschina.net/thomas2/blog/609136