_a_0_

Who am, Where am.

排序:
默认
按更新时间
按访问量

数学知识回顾三:函数的极限

2018-09-11 12:51:17

阅读数:20

评论数:0

数学知识回顾二:极限

(1) “截杖说”(庄子)——   一尺之棰,日取其半,万世不竭。  第一天剩下 , 第二天剩下  ,第三天剩下  ,…,第 n  天剩下 ,  … …    所以,所余杖棰长度组成数列 , , ,…, ,  … 显然 ,  该数列中的项随着 n  的增大而且随着 n  的无限增大 ,  该数...

2018-09-11 11:48:49

阅读数:19

评论数:0

数学知识回顾一:函数

函数: 给定一个数集A,对A施加一个对应的法则/映射f,记做:,那么可以得到另外一个数集B,也就是可以认为;那么这个关系就叫做函数关系式,简称函数。三个重要的因素:定义域A、值域B、对应的映射法则 f . 常见的函数: 常函数:           一次函数:        二次函数: ...

2018-09-11 10:33:05

阅读数:21

评论数:0

Redis五大数据类型常用操作:

Key的命令:DEL key该命令用于在 key 存在时删除 key。EXISTS key 检查给定 key 是否存在。EXPIRE key seconds为给定 key 设置过期时间。PERSIST key 移除 key 的过期时间,key 将持久保持。TTL key 以秒为单位,返回给定 ke...

2018-05-10 20:29:00

阅读数:44

评论数:0

HDFS编程之 .zip 转 .gz

import java.io.File; import java.io.IOException; import java.util.zip.GZIPOutputStream; import java.util.zip.ZipEntry; import java.util.zip.ZipInputS...

2018-05-02 20:20:42

阅读数:67

评论数:0

B+Tree原理及mysql的索引分析

转载:http://www.cnblogs.com/xiaoxi/p/6894610.html点击打开链接一、索引的本质     MySQL官方对索引的定义为:索引(Index)是帮助MySQL高效获取数据的数据结构。提取句子主干,就可以得到索引的本质:索引是数据结构。     我们知道,数据库查...

2018-04-24 22:27:00

阅读数:39

评论数:0

几种设计模式

一、概况总体来说设计模式分为三大类:(1)创建型模式,共五种:工厂方法模式、抽象工厂模式、单例模式、建造者模式、原型模式。(2)结构型模式,共七种:适配器模式、装饰器模式、代理模式、外观模式、桥接模式、组合模式、享元模式。(3)行为型模式,共十一种:策略模式、模板方法模式、观察者模式、迭代子模式、...

2018-04-24 22:24:43

阅读数:34

评论数:0

使用scala实现简单的rpc案例

题目:使用scala的actor构建一个简单的RPC调用实例模仿ResourceManager和NodeManager之间的交互,1、NodeManager向ResourceManager进行注册(传递的参数是:主机名、内存、CPU、端口)2、ResourceManager将接收到的消息进行消息匹...

2018-04-19 23:06:44

阅读数:89

评论数:0

Sqoop操作文档

导入:--connect 指定数据库链接url--username 指定数据库的用户名--password 指定数据库的密码--table 指定要导出数据的mysql数据库表-m 指定MapTask的个数--target-dir 指定导出数据在HDFS上的存储目录--...

2018-04-19 20:35:50

阅读数:57

评论数:0

MapReduce练习-----倒排索引

数据1: huangbo love xuzheng huangxiaoming love baby huangxiaoming love mimi liangchaowei love liujialing 数据2: hello huangbo hello xuzheng hello huangx...

2018-04-15 15:45:45

阅读数:170

评论数:0

MapReduce基础回顾题目

week1,A0001,10,20 week1,A0002,8.5,15 week1,A0003,9.2,30 week1,B0001,10.5,50 week2,A0001,11,30 week2,A0002,8,20 week2,A0003,9.2,20 week2,B0001,10,55 w...

2018-04-15 10:43:30

阅读数:65

评论数:0

MapReduce练习-----数字排序并加序号

数字排序并加序号:源数据: 最后结果: 2 1 2 32 2 6 654 3 15 32 ...

2018-04-14 19:47:29

阅读数:91

评论数:0

MapReduce练习-----版本变动

题目要求:在所有有版本变动的记录后面追加一条字段信息:该信息就是上一个版本的版本号,只限同用户例如:20170308,黄渤,光环斗地主,10,360手机助手,0.2版本,北京20170308,黄渤,光环斗地主,13,360手机助手,0.3版本,北京,0.2版本20170308,徐峥,光环斗地主,1...

2018-04-14 14:02:55

阅读数:68

评论数:0

MapReduce练习-----学生成绩相关题目

统计需求:1、统计每门课程的参考人数和课程平均分2、统计每门课程参考学生的平均分,并且按课程存入不同的结果文件,要求一门课程一个结果文件,并且按平均分从高到低排序,分数保留一位小数。3、求出每门课程参考学生成绩最高的学生的信息:课程,姓名和平均分。数据及字段说明:computer,huangxia...

2018-04-14 12:43:14

阅读数:385

评论数:0

Hive 优化

1、介绍首先,我们来看看Hadoop的计算框架特性,在此特性下会衍生哪些问题?数据量大不是问题,数据倾斜是个问题。jobs数比较多的作业运行效率相对比较低,比如即使有几百行的表,如果多次关联多次汇总,产生十几个jobs,耗时很长。原因是map reduce作业初始化的时间是比较长的。sum,cou...

2018-04-11 13:06:17

阅读数:35

评论数:0

Hive UDTF 函数的编写

在这篇文章中,我们将深入了解用户定义表函数(UDTF),该函数的实现是通过继承org.apache.hadoop.hive.ql.udf.generic.GenericUDTF这个抽象通用类,UDTF相对UDF更为复杂,但是通过它,我们读入一个数据域,输出多行多列,而UDF只能输出单行单列。如果你...

2018-04-10 23:23:39

阅读数:80

评论数:0

Hive UDAF 函数的编写

UDAF是Hive中用户自定义的聚集函数,Hive内置UDAF函数包括有sum()与count(),UDAF实现有简单与通用两种方式,简单UDAF因为使用Java反射导致性能损失,而且有些特性不能使用,已经被弃用了;在这篇博文中我们将关注Hive中自定义聚类函数-GenericUDAF,UDAF开...

2018-04-10 23:14:23

阅读数:530

评论数:0

Hive UDF 函数的编写

编写Apache Hive用户自定义函数(UDF)有两个不同的接口,一个非常简单,另一个...就相对复杂点。如果你的函数读和返回都是基础数据类型(Hadoop&Hive基本writable类型,如Text,IntWritable,LongWriable,DoubleWrit...

2018-04-10 22:54:37

阅读数:44

评论数:0

Hive影评案例二

现有如此三份数据:1、users.dat    数据格式为:  2::M::56::16::70072对应字段为:UserID BigInt, Gender String, Age Int, Occupation String, Zipcode String对应字段中文解释:用户id,性别,年龄,...

2018-04-10 22:06:28

阅读数:54

评论数:0

Hive影评案例一

现有如此三份数据:1、users.dat    数据格式为:  2::M::56::16::70072对应字段为:UserID BigInt, Gender String, Age Int, Occupation String, Zipcode String对应字段中文解释:用户id,性别,年龄,...

2018-04-10 20:56:25

阅读数:90

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭