- 博客(7)
- 资源 (7)
- 收藏
- 关注
原创 java中的动态绑定机制
java中的动态绑定机制1. 简单版public class Test { public static void main(String[] args) { Father father = new Son(); System.out.println(father.getResult());//40 //这段代码很简单,java中多态的特性...
2020-04-27 20:28:12 194
原创 Kerberos 安装与hadoop组件集成
Kerberos 安装与hadoop组件集成一. kerberos 安装yum -y install krb5-libs krb5-server krb5-workstation安装成功后,修改kerberos必需文件1. vim /etc/krb5.conf#注意修改被注释的内容# Configuration snippets may be placed in this dire...
2020-04-25 15:52:02 927
原创 maven package,logback采集日志,jar包启动脚本模板
maven paakage,logback采集日志,jar包启动脚本模板一. logback.xml1. pom依赖<dependencies> <!-- logback必备依赖 --> <dependency> <groupId>org.slf4j</groupId> <art...
2020-04-23 14:20:14 382
原创 Spark Submit源码阅读
Spark Submit 提交流程1. SparkSubmit//SparkSubmit//1.进入main方法def main(args: Array[String]): Unit = { val submit = new SparkSubmit() submit.doSubmit(args) //走doSubmit()}//2.doSubmit()def doS...
2020-04-17 10:06:44 152
原创 Avro通过schema写.avro文件
导入依赖<dependency> <groupId>org.apache.avro</groupId> <artifactId>avro</artifactId> <version>1.9.2</version></dependency>构造scheam{ \"type\...
2020-04-09 21:03:03 557
原创 Linux 系统挂载磁盘
查看所有磁盘信息fdisk -l编辑一个分区fdisk /dev/sda创建磁盘分区mn一直回车(默认使用默认值)w:最后保存退出再次查看磁盘,你会发现该磁盘下多了一个分区1格式化磁盘mkfs -t xfs /dev/sdba1挂载mount /dev/sdb1 /data最后设置开机自动挂载vim /etc/fstab//添加一条数据/dev/sda1 ...
2020-04-01 11:19:53 113
原创 SparkSQLBroadcast join实例
最近做sparksql的优化,需要用到sparksql broadcast join,之前在网上找了好多资料,发现介绍理论的偏多,实际操作案例较少,在此记录:Broadcast join:大表关联小表时使用. 比如:百亿级别的大表对千条数据量的小表进行关联查询时。众所周知,在spark中进行...
2020-04-01 10:38:27 4204 1
MySQL--5.6.22-1.el6.i686.rpm.zip
2019-05-10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人