![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
Jiesonshan
这个作者很懒,什么都没留下…
展开
-
Spark+Scala+intellij在win7下开发环境配置
spark在win7下的环境配置原创 2017-08-05 09:01:58 · 4159 阅读 · 0 评论 -
Maven编译打包spark(2.1.0)源码及出现问题的解决方案(win7+Intellij IDEA)
Maven编译打包spark(2.1.0)源码及出现问题的解决方案(win7+Intellij IDEA) 编译spark源码进行二次开发,中间出现的问题及解决方法原创 2017-08-05 10:10:44 · 9090 阅读 · 1 评论 -
XGBoost的spark版编译部署 linux
XGBoost的spark版编译部署(Linux) 源码下载 git clone --recursive https://github.com/dmlc/xgboost 编译安装 cd xgboost; make -j4 maven安装jar包到本地mvn仓 mvn install:install-file -Dfile=./xgboost4j-0.8-SNAPS原创 2018-02-04 09:40:37 · 3543 阅读 · 0 评论 -
scala函数解析 fold、foldLeft和foldRight
fold函数将一种格式的输入数据转化成另外一种格式并返回;fold, foldLeft和foldRight这三个函数做的事情差不多仅有一点点不同。下文解释它们的共同点并解释它们的不同点。 举一个简单的例子,用fold计算一系列整型的和。 valnumbers=List(5,4,8,6,2) numbers.fold(0) { (z, i) => ...翻译 2019-08-06 14:56:13 · 706 阅读 · 0 评论