自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 Python学生管理系统

今天闲来无事,看到高校放寒假才起来一些学生是要写课设的,就随手写了个学生管理系统,可能这会发有点晚了,但还是希望能够给大家带来一些帮助写的时候没有用到文件,有需求的自行添加即可,本程序只是闲暇之作,如有不足之处,还请打在评论里不吝赐教。

2024-01-19 21:32:46 636 1

原创 Hive中的行列转换:揭秘数据重塑的魔法(2)

在Hive中,行转列是一种常见的操作,它能够将多行数据中的某些值聚合到一起,形成单个值,从而将数据从宽格式变为长格式。进行行转列操作,可以帮助我们更深入地挖掘数据的内在关系,更好地理解数据的分布和特征。

2024-01-17 20:53:23 1011

原创 Hive中的行列转换:揭秘数据重塑的魔法(1)

随着大数据时代的来临,Hive作为一种数据仓库工具在数据处理中扮演着重要的角色。而数据行列转换作为数据处理的核心操作,在Hive中也显得尤为重要。通过行列转换,我们能够更深入地理解数据的内在联系,发现数据背后的故事。

2024-01-16 20:34:25 607 1

原创 HDFS的三大机制

通过这个比喻,我们可以更形象地理解HDFS的架构流程和各个组件的角色。HDFS就像一个高效有序的图书馆系统,通过NameNode和DataNode的协同工作,实现了大规模数据的可靠存储和高效访问。总的来说,HDFS的架构流程通过合理地分配和管理数据块和副本,以及有效地监控和管理节点状态,实现了大规模数据的可靠存储和高效访问。如果把HDFS比作一个巨大的图书馆,那么NameNode就是图书馆的目录,而DataNode则是存放图书的架子。

2024-01-11 21:13:55 2186 1

原创 Hadoop HDFS集群 和 Yarn集群的架构

Hadoop是一个用Java编写的Apache开源框架,允许使用简单的编程模型跨计算机集群分布式处理大型数据集。是专门为离线和大规模数据分析而设计的,Hadoop旨在从单个服务器扩展到数千个机器,每个都提供本地计算和存储。目录Hadoop 介绍Hadoop 2.X HDFS 集群架构Hadoop 2.X Yarn 集群HDFS和MapReduce。是分布式文件系统,用于分布式存储海量数据。MapReduce是分布式数据处理模型,本质是并行处理。ps是Hadoop 2.0中的资源管理系统。

2024-01-08 21:16:07 557

原创 Python的安装教程(必看)

Guido van Rossum (吉多·范·罗苏姆),中国Python程序员都叫他 龟叔,荷兰人2、python借鉴了C语言风格3、python是一个解释型语言4、Python正式诞生于1991年Python是跨平台的开发工具,它可以在多个操作系统上进行使用,编写好的程序也可以在不同系统上运行。进行Python开发常用的操作系统及说明如下表所示。

2024-01-04 21:30:13 1455

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除