- 博客(7)
- 收藏
- 关注
原创 java 面试复习
Java基础 java 中常量和变量的区别 常量使用 final 修饰,初始化后不能被修改 HashMap putVal(): https://www.processon.com/diagraming/60dd21fe7d9c0828531d65f2 resize(): 判断是否达到最大容量(2^30),如果到大,长度设置为int.max 创建一个数组大小为为原数组的两倍 遍历原
2021-07-10 19:06:04 138
原创 学习笔记_mapReduce
一个分布式并行计算框架 MapReduce作为计算框架,一定会有input和output,它本身完成了一个单一的工能,就是排序,在MapReduce里边,所有的数据被统一成一种格式:<key,value>的形式,这其实也是一种掣肘。MapReduce对读入的数据的key进行排序,然后经过用户自定义的逻辑之后输出到hdfs。 MapReduce的原理及运行流程:...
2018-10-16 21:54:19 152
原创 使用idea遇到过的一些问题
我觉得jet brains的工具都非常的好用,但是使用的时候也会遇到一些其他ide没遇到过得问题。一下是踩过坑的总结,后续遇到还会更新。1.在使用idea写hive的udf,打包到集群之后,create function的时候报了classnotsupportedexception,code=52.0;52.0代表了jdk1.8,说明集群不能支持运行jdk1.8的代码。所以在pom文件...
2018-10-08 21:18:23 130
原创 hadoop学习笔记之hdfs
hadoop distributed file system(1)hdfs的架构和原理:hdfs采用master/slave的结构来存储数据,这种架构主要有四个部分组成:client、namenode、datanode、secondary namenode; client:就是客户端1、文件切分。在上传文件的时候,client将文件切分为一个个的block。然后进行存储。...
2018-10-08 21:04:12 155
原创 ClassNotSupported
用idea打包udf到集群的时候,报ClassNotSupported的错误, 在这里的project language level 设置了最低支持的jdk版本。
2018-10-07 10:51:24 266
原创 Linux一些简单的命令
1.按列取的命令awk awk -F '\t' '{print $1,$2,$3}' user.txtsort sort -t $'\t' -k2n user.txtcut cut -d $'\t' -f1,2,3 user.txt2.数据处理命令的对比grep sed awkgrep grep [参数] '匹配关键字' fileName -c:count -e:多个连续命令 -E:extend...
2018-03-17 15:32:35 145
原创 我的简易计算器
public class Inter { public static void main(String[] args) { Drive drive = new Drive(); drive.operation(); }}package 测试;import 内核.Kernel;import 内核.Second;import 内核.first;public class Calculate exte...
2018-02-14 17:55:33 165
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人