自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

DCHAO的博客

金融、大数据 数仓开发、运维、项目经理

  • 博客(339)
  • 收藏
  • 关注

原创 cdh6.3.2的hive配udf

cdh的官网上说配UDF,需要考虑是否重启hs2,是否启用sentry,列出了3种方案。但实际上就用传统的hive的方式就成功了。

2024-01-22 12:38:28 476

原创 spark的jdbc接口,类似于hiveserver2

Spark SQL可以作为一个分布式查询引擎,通过其JDBC/ODBC或命令行接口进行操作。通过JDBC/ODBC接口,用户可以使用常见的数据库工具或BI工具来连接和查询Spark SQL,这使得Spark SQL可以与现有的数据分析工具和报表工具集成,为用户提供了更加灵活和便捷的数据分析和查询方式。这里实现的Thrift JDBC/ODBC服务器对应于Hive 1.2.1中的HiveServer2。您可以使用Spark或Hive 1.2.1附带的beeline脚本测试JDBC服务器。

2024-01-19 15:25:57 627

原创 开源协议-

2024-01-01 00:34:13 357

原创 酒席-山东临沂规矩

主陪是核心,鱼头对准主陪。

2024-01-01 00:33:23 452

原创 Zabbix+Grafana

对指标采集将采集的信息存储可视化报警因为节点上本身就是zabbix,但对应的server在数据中心,不知道一个agent可否服务于多个server端,而且不确定数据中心是否会提供用户。所以还是放弃zabbix。

2023-12-12 22:31:14 600

原创 ck 配置 clickhouse-jdbc-bridge

ck可以用过clickhouse-jdbc-bridge技术来直接访问各数据库。

2023-11-21 23:40:15 946 1

原创 虹桥高铁站接人

P10在南边,适合南边过去的人虹桥高铁站的入口在2楼,出口在B1楼,1楼也是入口但不能走私家车,是公交车的入口。1楼和B1之间还有BM1和BM2。一共6个出站口,北123和南123,都在B1大厅里,B1大厅可以进但需要安检,一般在B1大厅的总出站口等B1大厅的出站口可以直接到1楼和2楼大厅,但没法到2楼大厅的入口,因为需要过安检,只有买了票的才能进。所以没法像济南西站那样从入口出站。

2023-11-13 14:34:02 853

原创 美缝11111

然后用鱼鳞毛巾蘸水,全部挤干,叠成方巾,以打圈的方式擦。平行按压,后一次盖住前一次的一半,相当于按2遍。木浆海绵蘸水,然后全部挤干,以打圈的方式擦。A料和B料混合,20分钟之内用完。然后填完半个瓷砖的距离,就刮一次。用环氧采砂,因为好施工。

2023-11-08 14:39:20 53

原创 面向对象oop的理解

如果是复杂场景,一些高级的思考活动,比如学习、比如做一个管理系统,那就需要一个最贴近人话的方式(实际上就是最简单)的方式转为代码,说白了,代码是语言的精炼。而人的语言,就是面向对象的。oop是编程中的概念,任何编程语言,都有个问题,要把需求转变为代码,需求理解了,可以用人类的思想、语言表达出来,那人类语言怎么转成代码呢?比如一个苹果,我们怎么理解呢,是一种水果、红色的、又酸又甜、富含vc,这些,都是继承,继承自已有的类。所以,面向对象,就是用最贴近人语,也就是最简单的方式,理解事物,把人的思维转为代码。

2023-10-11 16:01:55 115

原创 cpu睿频相关知识

cpu有默认频率,也有睿频和超频,睿频和超频意思差不多,超频是没有安全保护的,而睿频相当于加了保险的超频。cpu可以选模式,有5种,一般只能2选1。开睿频需要重启,在bios中开。

2023-10-09 11:12:47 102

原创 linux 中查看硬件信息,比如cpu、硬盘

lscpucpu实时频率和占用率cpu模式。

2023-10-09 09:18:42 149

原创 cdh\cm 的图表功能---自带的监控

https://blog.51cto.com/u_14049791/5668781

2023-10-08 14:49:21 109

原创 离开北京后,公积金怎么处理,可否提现。上海租房提取公积金

这种方式适用于您在外地的工作单位为您建立了住房公积金账户的情况。您可以将在北京的住房公积金账户内的全部金额,转移到在外地的住房公积金账户内。您需要联系原单位为您办理转移手续,提供本人身份证原件或复印件,以及外地的住房公积金开户证明或接收函。您可以申请提取在北京的住房公积金用于支付购房款或还贷款。您需要联系原单位为您办理提取手续,提供本人身份证原件或复印件,以及购房合同、发票、借款合同等相关材料。您需要联系原单位为您办理提取手续,提供本人身份证原件或复印件,以及租赁合同、发票等相关材料。

2023-09-13 10:16:01 179

原创 GaussDB

而dws(Distributed Warehouse Service)是基于GaussDB构建的一款分布式数据仓库解决方案,它在GaussDB的基础上增加了大规模并行处理(MPP)的能力,能够在分布式集群中进行高效的数据分析和查询。两者在架构和功能上有一定的差异,适用于不同的场景和需求。GaussDB是华为自主研发的一款分布式关系型数据库管理系统(RDBMS),它具有高性能、高可靠性和高可扩展性的特点,适用于大规模数据存储和处理的场景。

2023-09-07 13:19:31 203

原创 数学111

就像一个馒头,根本没人吃,那就不会有怎么切的问题,数学并不负责解决这种根本不是数学问题的问题。

2023-08-22 10:15:06 68

原创 sqoop

可以在关系型数据库和hdfs、hive、hbase之间导数导入:从RDBMS到hdfs、hive、hbase导出:相反sqoop1 和sqoop2 (1.99.x)不兼容,sqoop2 并没有生产的稳定版本,Sqoop1 import原理(导入)从传统数据库获取元数据信息(schema、table、field、field type),把导入功能转换为只有Map的Mapreduce作业,在Mapreduce中有很多map,每个map读取一片数据,进而并行的完成数据的拷贝。

2023-08-01 15:07:43 1620

原创 需求管理-排期

需求排期是指根据项目的需求和优先级,将各个需求安排在时间上的先后顺序。通过需求排期,可以确定每个需求的开始时间和完成时间,以及各个需求之间的依赖关系和关联性,以便在项目开展过程中合理安排资源和时间,提高项目的执行效率和质量。需求排期通常是项目管理中的一个重要环节,可以帮助团队更好地组织和管理项目的各个阶段和任务。

2023-06-27 15:05:02 537

原创 买车税费和保险

裸车价=开票价,是包含增值税的发票上会有增值税,这个增值税由卖车方交买保险就是根据裸车价来计算车辆损失险和盗抢险的。所以万一车辆发生了损毁的情况保险就是按照这个价格给你赔偿的。所以低开发票的话要问清楚保费的计算基准。

2023-06-20 14:30:28 233

原创 面试-数据库三范式的理解

数据库三范式的作用在于规范化数据库设计,减少数据冗余,提高数据的一致性和可靠性。通过遵循三范式的设计原则,可以减少数据冗余,提高数据的一致性和可靠性,减少数据的更新和修改,提高数据库的性能和效率。同时,三范式的设计原则也为数据库的扩展和维护提供了便利,可以更加方便地进行数据库的修改和更新。第一范式(1NF):要求每个属性都是原子性的,即每个属性都不能再分解为更小的数据项。第三范式(3NF):要求每个非主键属性都不传递依赖于主键,即每个非主键属性只依赖于主键,而不依赖于其他非主键属性。

2023-06-01 10:31:26 116

原创 面试-ACID的理解

ACID特性可以保证数据库事务的正确性和完整性,从而提高了系统的可靠性和稳定性,保证了数据的安全性和一致性。ACID是数据库事务的四个特性,分别是原子性(Atomicity)、一致性(Consistency)、隔离性(Isolation)和持久性(Durability)。原子性(Atomicity):事务是一个不可分割的工作单位,要么全部执行成功,要么全部执行失败,不会出现部分执行的情况。隔离性(Isolation):多个事务同时执行时,每个事务都应该感觉不到其他事务的存在,即每个事务应该是独立的。

2023-06-01 10:30:51 123

原创 typora设置图床

需要安装图传软件picgo,这个软件又依赖node.js,所以还要装node.js。然后用gitee的仓库当图床,期间还要生成token。

2023-05-09 16:06:39 63 1

原创 周边-midjourney

discord是个类似于微信的聊天软件,可以建服务器,然后进入到这个服务器内的所有人可以通过文字、语音、视频的方式聊天,也可以直播。需要先注册discord,可以用国内邮箱和手机号。

2023-04-20 10:03:48 209

原创 为什么生孩子,生孩子的意义

在三四十岁的某一天,你会突然发现,生命中最好的事,都已经发生过了,剩下的只是重复和老去,一年年,一天天。他/她让你烦恼,让你牵挂,让你欢喜,让你惊讶,让你再经历一次童年,让你明白当年父母的心境,让你有理由买曾经求而不得的玩具,让你在痛苦时坚强,在危机中冷静,让你看到童年时的自己,看到他的勇敢,他的好奇,他的局促,他的不安,从而更好的理解自己,接受自己。你可以庇护的是他们的身体,却不是他们的灵魂,因为他们的灵魂属于明天,属于你做梦也无法达到的明天。”孩子总会奔向属于他们的明天,而妈妈多了一个世界。

2023-02-02 14:14:10 275

原创 保险的分类

寿险、健康险、产险、意外险。。。到底怎么区分?容易混淆的,人寿和健康。意外和健康。重疾和医疗。

2023-02-02 14:07:44 298

转载 上海买卖房-交税

可以使用头脑风暴法,做出一个模型。这样在前期有相对清晰的认知和定位,优先级别的选择,后期就不会反复纠结,尤其是在卖方市场,一天一个价格的时期,时间成本则是最大的成本。

2023-01-11 08:53:11 319

原创 实践级菜谱

4、一起放到高压锅中,放开水,放姜、料酒、红枣、白胡椒、盐。压20分钟,然后开盖煮,放花生米、核桃仁。冰糖、炖料(花椒、八角、桂皮、香叶)、葱、姜、干辣椒、盐。2、放料酒、姜,排骨焯水,然后把莲藕放进去烫一下。盐、白胡椒、姜、花生米、核桃仁。3、排骨温水清洗,莲藕凉水清洗。1、莲藕切块,泡在盐水中。

2023-01-05 09:30:36 336

原创 excel-函数及应用场景

配合条件可以实现if-else。

2022-11-30 15:05:39 1541

转载 saas paas iaas 区别

123

2022-11-11 15:28:46 268

原创 装修要求11111111111111

必须开放式厨房,如果厨房墙不能砸那就换地方建厨房,经常做饭,西式为主,要有吧台,可以不要岛台。2个卫生间都不要浴缸,必须有小便池,干湿分离可以不要,洗衣机可以放在卫生间,可以省空间。餐桌可以不要,如果有,要能折叠的,我们平时就在吧台吃饭。油烟机、直饮水、厨房下水道粉碎器、蒸烤箱、水槽式洗碗机。换鞋的时候要舒适,要有专门的座位用来换鞋。换鞋区要够大,要能满足2个人同时换鞋。请尽量的把猫的区域弄得小一点。玄关可以不要,不迷信风水。

2022-11-08 10:01:08 838

原创 shell-du、df

du用来显示指定目录下的文件(包括目录)占用空间的大小。

2022-11-08 09:04:33 103

原创 git-merge和rebase的区别

merge和rebase都可以用来进行代码合并,也就是分支合并。但rebase还有别的使用场景,比如更新当前分支的起点,跟master保持一致。merge的设计目标就是用来进行分支合并,并且保留所有分支和所有分支的历史纪录。rebase的设计目标用来修改提交记录,它可以删除、合并、修改commit,其中合并commit其实就变相实现了分支合并。

2022-11-04 17:04:19 420

原创 sql-union&union all

2者都是用来把2个结果集进行上下合并的要求2字段的数量和类型要一致。不过在hive中,类型一致的要求没那么严格。

2022-11-02 11:39:47 398

原创 周边-车辆事故处理

让对方直接跟保险公司谈,其他任何费用,包括误工费,拖车费,都找保险公司。安全第一,先判断会不会发生二次事故,下车撤离到安全位置。判断自己的责任,观察对方司机,是否喝酒,是否有驾照。拍照,尽量多拍观察周围是否有目击者,摄像头。报案'打110比122快',保险公司。事故发生后,冷静不要慌。

2022-10-26 08:53:13 172

原创 玩-旅游-苏州

2022-09-30 21:57:02 153

原创 git-版本的控制,回退commit和push(reset、revert)

git reset

2022-09-29 19:28:40 653

原创 git-查看日志、log和reflog

git 日志

2022-09-29 19:27:11 4606

原创 hive-join

hive-join

2022-09-28 19:03:55 402

原创 SQL的执行顺序

sql执行顺序

2022-09-19 20:32:20 439

原创 shell-数值计算、expr

shell-数值计算、expr

2022-08-26 18:20:52 335

原创 shell-数组和关联数组

shell-数组和关联数组

2022-08-25 17:49:15 375

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除