自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 黑马Hadoop

---Zookeeper 与 Hdfs中的Namenode主节点的关系。如下图,客户端A+客户端B 同时发起 修改+删除操作,为了保持目标表在3个主节点Namenode的数据都一样,出现了Zookeeoper组件。:简单来说,就是一群独立计算机集合起来共同对外提供服务,但是对于系统的用户来说,就像是一台计算机在提供服务一样。按顺序给出数据存储单位:bit 、Byte(字节) 、KB、MB、GB、TB、PB、EB、ZB。分布式:多台计算机通过网络连接在一起,但每台计算机上的工作内容及数据,是不同的。

2023-05-08 13:43:37 60 1

原创 Hadoop 、Hive 、Spark概念

-----------------------------------------需要写一个特别专业的 MapReduce 分布式处理的程序才能运行,不能写sql运行。-------------------------------------------------------以上为 简单可行的单机方案。-------------------------------------Spark经常被用来和Hadoop中的MapReduce做对比。

2023-05-06 12:11:12 106 1

原创 Spark sql数据倾斜

原因: 某一个数据值 过多。hive sql数据倾斜。

2023-04-27 16:53:56 409

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除