![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark机器学习
一日两点水
我来自河北理工大学
展开
-
SparkML (一) Spark的环境搭建与运行
做Spark也有段时间了,主要是平台方面的东西源码也改过些。不过总觉得还是应用才是王道,加上现在AI日趋火爆,抽点时间学习下SparkML吧。—前言我博客里SparkML系列的文章是基于Spark机器学习这本书(Nick Pentreath著),把每章重点和自己的一些感悟记录下。Spark的环境搭建与运行Spark支持4中运行模式本地单机模式: 在本机的一个JVM里构造的一个多线程版本的Spark原创 2017-09-11 22:26:38 · 3511 阅读 · 0 评论 -
SparkML(二) 设计机器学习系统
本章还是理论阶段,有一套完整清晰的理论对设计高层架构有着巨大作用。大数据处理系统必备的特性必须能与其他系统组件整合,数据收集系统、数据存储系统、前段web服务等等必须易于扩展且与其它组建独立,理想情况下要兼具水平和垂直可扩展性支持高校完成所需类型的计算,包含机器学习和迭代式分析应用 最好能同时支持批处理(离线处理)和实时处理机器学习系统常应用在如下方面个性化目标营销和原创 2017-09-12 23:10:25 · 531 阅读 · 0 评论