- 博客(6)
- 收藏
- 关注
原创 大数据杂记
mr的继承类1.map extends Mapper2.reduce extends Reduce3.bean implements WriteableComparable4.groupConmparator extends WriteableComparator5.softComparator extends WriteableComparator6.partitioner exte...
2019-12-25 19:42:40 112
原创 spark主要核心笔记
spark主要用来做数据的分析,必须要把分析的数据存放到rdd-----------弹性分布式数据集弹性:可以随着work的变化而变化分布式:同一个数据集在多台服务器中存放,每一台服务器只存放整个rdd的一部分,一般都是平均分配rdd:就是一个集合/数组,这样来理解:看成一个数据库数据集:数据的集合,很多很多的数据rdd中有许多的分区,相当于数据库的表----数据存放在rdd的分区中r...
2019-12-25 19:38:22 152
原创 MapReduce著名案例之天气TOP-N
天气mapreduce的案例TQ封装的类package TQ;import org.apache.hadoop.io.WritableComparable;import org.apache.hadoop.io.WritableComparator;import java.io.DataInput;import java.io.DataOutput;import java.io.IO...
2019-12-25 19:23:11 508 3
原创 mysql的学习笔记三
mysql 表连接 join学生列表(stu)sutID name classIDstu001 张三 bj001stu002 李四 bj001班级列表(class)classID className zyIDbj001 软件1 zy001bj002 软件2 zy001专业表(zy)zy_id zy_namezy001 软件zy002 计算现在想要查询某个学生...
2019-12-24 09:29:35 98
原创 mysql学习笔记(2)
##mysql 函数#1.length 获取参数值的字节个数select length('join')SELECT LENGTH('汉字所占字节')#2.concat 拼接字符串select concat(last_name,’_’,frist_name) 姓名 FROM TABLE_NAME;#3.upper/lower大写小写SELECT CONCAT(UPPER(las...
2019-12-10 16:11:01 97
原创 mysql基础学习笔记(1)
#mysql1.在mysql中插入数据insert into table (id,name) values(1,zhangsan);2.在mysql中改变数据update table set name='lilei' where id=1;3.删除表中的数据detele from table where id=1;4.查看当前所在的数据库select database();...
2019-12-10 14:29:06 107
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人