![](https://img-blog.csdnimg.cn/9e4e77ba433849349120b4f33a1c0bd4.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据
文章平均质量分 70
这里总结一些我在大数据方面学习的经验
ZZY_dl
积极向上 自信阳光
展开
-
大数据体系知识学习(三):数据清洗_箱线图的概念以及代码实现
箱线图通过绘制数据的中位数、四分位数、最大值和最小值等信息,可以帮助检测数据中的异常值。在箱线图中,超出1.5倍四分位距的数据点被视为异常值。原创 2023-04-24 21:17:52 · 325 阅读 · 0 评论 -
大数据体系知识学习(二):WordCount案例实现及错误总结
因为转载时间过长找不到spark所以报错。: 版本号为1.8.0_333。: 版本号为3.3.0。words.txt如下。:版本号为3.1.2。原创 2023-03-18 19:43:52 · 333 阅读 · 0 评论 -
大数据体系知识学习(一):PySpark和Hadoop环境的搭建与测试
PySpark安装包括两种安装方式,第一种直接pip指定版本安装,第二种直接下载文件离线安装。下载符合本机Hadoop和JDK版本的Spark安装包。下载完成后进行解压在D盘的根目录下,设置环境变量。放入文件夹,在环境变量指定Hadoop路径。打开Pycharm,输入以下代码并运行。(无需添加环境变量)(需要添加环境变量)原创 2023-03-16 22:04:49 · 636 阅读 · 0 评论