实习复习纲要
数据结构,计算机网络原理,数据库等
mubanxia
这个作者很懒,什么都没留下…
展开
-
实习复习纲要-大数据
数据倾斜以及解决办法类似二八原理,大量的相同key被partition分配到一个分区里,造成了“一个人累死,其他人闲死”。两种情况变量值很少: 单个变量值的占比极大,常见的字段如性别、学历、年龄等。变量值很多: 单个变量值的占比极小,常见的字段如收入、订单金额之类的。Hadoop不在乎大数据量,但是数据倾斜是大问题。解决方法:1.增加JVM内存,适用于变量值很少的情况。这种情况下,往往只能通过硬件的手段来进行调优,增加jvm内存可以显著的提高运行效率;2.增加reduce的个数,这适用于原创 2020-05-13 22:22:00 · 192 阅读 · 1 评论 -
实习复习纲要-数据库
一.集合运算(1)Union并,Intersection交,Difference差差:A-B是由属于A但是不属于B的元组组成的集合。(2)Product笛卡尔积当两个表格含有相同属性,比如R和S都有B属性,应该在结果中用R.B和S.B进行区分。二.自然选择运算(1)投影 :=从表中选出指定的属性值组成一个新表CN:=CUSTOMER[cname]取出CUSTOMER表中的cna...原创 2020-05-01 12:12:15 · 411 阅读 · 0 评论 -
实习复习纲要-Linux
1.查ipifconfig2.查端口netstat -lntupl:listening n:num t:tcp u:udp p:process原创 2020-05-01 10:08:05 · 123 阅读 · 0 评论 -
实习复习纲要-计算机网络原理
一.ISO七层模型1.应用层在应用程序端点传输分组。协议:HTTP, SMTP, FTP分组:报文可以理解为两个大人物(陈玉楼,鹧鸪哨)通过驿站交换情报。应用层为整个驿站传输系统。2.表示层作用:使通信的应用程序能够解释交换数据的含义,数据压缩,数据加密,数据描述。可以理解为两个大人物的副手,确定密码口令。3.会话层作用:数据交换的定界和同步功能,包括建立检查点和恢复方案的方法...原创 2020-04-30 14:12:33 · 430 阅读 · 0 评论 -
实习复习纲要-数据结构
数据结构1.链表(1)单链表typedef struct Lnode {Elemtype e;struct Lnode *next}Lnode, *Linklist;2.栈typedef struct {SElemtype *top;SElemtype *base;int stacksize;}SqStack;3.队列typedef struct {QElemty...原创 2020-04-30 10:34:39 · 183 阅读 · 0 评论