- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hadoop上传文件到HDFS的步骤
随着大数据时代的到来，数据存储和处理变得至关重要。Hadoop作为大数据处理的基石，其分布式文件系统HDFS提供了高效、可靠的数据存储方案。本文旨在简要介绍如何使用Hadoop命令行工具将文件上传到HDFS，为大数据处理提供基础支持。1.启动Hadoop集群。
2024-05-08 19:21:08
4454
2
原创 网络爬虫之urllib库
网络爬虫是获取和利用网页数据的重要工具。在Python中，urllib库是一个强大的工具，可以帮助我们轻松地构建简单的网络爬虫。通过使用urlopen函数，我们可以获取网页的内容，并使用try/except语句处理可能出现的异常。虽然urllib库本身不提供HTML解析功能，但我们可以结合其他库如BeautifulSoup来提取我们感兴趣的信息。通过学习urllib库，我们可以深入了解网络爬虫的基本原理和工作方式。
2023-12-26 14:50:39
1378
1
原创 python数据分析之数据分箱
数据分箱在数据分析中具有重要的作用。首先，它可以提高数据的可读性和可理解性。将连续变量转换为离散变量后，数据的分布和趋势会更加直观，便于分析人员快速了解数据的特征和规律。其次，数据分箱可以用于特征选择和降维。在某些情况下，原始数据可能包含大量冗余或无关的特征，通过分箱可以将这些特征合并或删除，减少特征的维度，提高分析的效率和准确性。此外，数据分箱还可以用于模型的训练和预测。在建立分类模型时，需要对连续变量进行离散化处理。通过分箱，可以将连续变量转换为离散变量，从而适用于分类模型的训练和预测。
2023-12-21 10:41:32
2269
1
原创 Java的循环嵌套
这种嵌套方式中，外层循环和内层循环是独立的，它们的执行不会相互影响。在一个循环语句的循环体内部再嵌套一个或多个循环。这种嵌套方式中，内层循环的执行会受到外层循环的控制，内层循环需要执行符合条件的完整循环才能使外层循环进入下一次循环。（1）在for循环语句之前已经给循环变量赋初值，则for语句的循环变量赋初值部分可以省略，但是初值后的分号不能省略。思路：先判断一个数是否为素数，将这个数用循环代替，从2到1000，修改格式，每行显示8个素数。在循环体中，需要注意变量的作用域和生命周期，以确保变量的正确使用。
2023-11-18 15:08:32
1336
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人