自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(5)
  • 资源 (2)
  • 收藏
  • 关注

原创 求某一数据同比增速以及处理切割数据

紧跟上一篇记录,在本次开发中需要处理四张表,对其中一个EV同比增速情况进行计算。其中两张表的时间周期以“22Q1”/"22Q2"/"22Q3"/"22Y"的形式展示。另外,我的最终结果是以Oracle视图形式呈现,所以前面加了个创建视图表语句。给到的样例数据只有一年,所以结果没有显示增速信息。另一张表中我造了一条数据,就可以正常体现结果。

2024-02-08 15:09:54 311

原创 将out文件样例数据导入数据库

第四步、去数据库中建表,把csv文件导入开发环境中,再插入表格(DBeaver中右键点击对应表格→导入数据→选择CSV文件→下一步→继续→完成)。在前几天开发过程中,需求方给到一份样例数据需要进行同比增速情况计算,这份数据以.out文件形式给到,如下图。第三步、打开pycharm,利用python的numpy库,将处理好的数据剪切到代码中转化为csv文件。

2024-02-08 14:20:24 194

原创 关于zookeeper的架构和两大机制问题

它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

2023-09-30 23:06:16 45

原创 yarn的定义、功能、组件以及调度程序

1.client向RM提交应用程序,其中包括启动该应用的ApplicationMaster的必须信息,例如ApplicationMaster程序、启动ApplicationMaster的命令、用户程序等。5.申请成功的container,由ApplicationMaster进行初始化。container的启动信息初始化后,AM与对应的NodeManager通信,要求NM启动container。3.启动中的ApplicationMaster向ResourceManager注册自己,启动成功后与RM保持心跳。

2023-09-27 20:25:53 49

原创 MapReduce执行流程

早期学习整理笔记。

2023-09-27 19:53:29 36 1

yarn的定义、功能、组件以及调度程序

yarn的定义、功能、组件以及调度程序

2023-09-27

MapReduce流程图

整理绘制MR流程图

2023-09-27

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除