- 博客(2)
- 收藏
- 关注
原创 博客摘录「 机器学习入门好文,强烈推荐」2023年5月5日
1、从广义上来说,机器学习是一种能够赋予机器学习的能力以此让它完成直接编程无法完成的功能的方法。但从实践的意义上来说,机器学习是一种通过利用数据,训练出模型,然后使用模型预测的一种方法2、通过拟合直线的过程,我们可以对机器学习过程做一个完整的回顾。首先,我们需要在计算机中存储历史的数据。接着,我们将这些 数据通过机器学习算法进行处理,这个过程在机器学习中叫做“训练”,处理的结果可以被我们用来对新的数据进行预测,这个结果一般称之为“模型对新数据 的预测过程在机器学习中叫做“预测。
2023-05-05 19:29:41 121 1
原创 Spark之Yarn模式部署
独立部署(Standalone)模式由Spark自身提供计算资源,无需其他框架提供资源。这种方式降低了和其他第三方资源框架的耦合性,独立性非常强。但是你也要记住,Spark主要是计算框架,而不是资源调度框架,所以本身提供的资源调度并不是它的强项,所以还是和其他专业的资源调度框架集成会更靠谱一些。所以接下来我们来学习在强大的Yarn环境下Spark是如何工作的(其实是因为在国内工作中,Yarn使用的非常多)。解压缩文件: 将spark-3.0.0-bin-hadoop3.2.tgz文件上传到lin..
2022-03-17 09:01:55 857
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人