- 博客(9)
- 收藏
- 关注
转载 如何在idea中将tab键设置为按一下代表4个空格
步骤如下图(ctrl+alt+s 打开如下图设置界面):Editor–>Code Style --> java(如果使用的是其他编程语言请选择其他语言)–>不要勾选Use tab character -->Indent设置为4(表示按一下tab键代表4个空格)...
2019-06-16 22:30:41
3407
原创 Sqoop
第1章 Sqoop简介Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。Sqoop项目开始于2009年,最早是作为Hadoop的一个第三方模块存在...
2019-05-28 21:24:53
494
转载 三范式
a 所有字段值都是不可分解的原子值b 也就是说在一个数据库表中,一个表中只能保存一种数据,不可以把多种数据保存在同一张数据库表中c 数据表中的每一列数据都和主键直接相关,而不能间接相关1.第一范式(确保每列保持原子性)第一范式是最基本的范式。如果数据库表中的所有字段值都是不可分解的原子值,就说明该数据库表满足了第一范式。第一范式的合理遵循需要根据系统的实际需求来定。比如某些数据库...
2019-05-27 09:00:07
204
原创 【Flume】如何利用netsat传递文件
如何利用netsat传递文件$ nc -l 1234(端口号) > filename.out(信息写入的文件)$ nc host.example.com(服务器网址/名称) 1234(端口号) < filename.in(准备写入的文件)nc:netcat-l:监听...
2019-05-20 21:16:28
114
原创 【Flume】EventPutAttemptCount>EventPutSuccessCount,EventTaskAttemptCount>EventTaskSuccessCount的情况
什么情况EventPutAttemptCount>EventPutSuccessCount,什么情况EventTaskAttemptCount>EventTaskSuccessCount?EventPutAttemptCount是放入putList 的总和个数,EventPutSuccess是放入channel 的个数当channel 中没有数据了,会出现EventTaskAtte...
2019-05-20 20:23:23
305
原创 foo, bar
老外的编程案例里经常会出现 foo bar 这样的变量名, 其实来源于二战时期的粗话俗语, 大概的意思类似中国话里的张三李四, 我们自己举例子不是喜欢说张三李四吗, 他们老外就说 foo, bar 什么的...
2019-05-20 19:21:18
192
原创 【Flume】batchSize和transactionCapacity区别
batchSize是针对Source和Sink提出的一个概念,它用来限制source和sink对event批量处理的。即一次性你可以处理batchSize个event,这个一次性就是指在一个事务中。当你处理的event数量超出了batchSize,那么事务就会提交了。注意,这里有一个隐晦的地方,就是batchSize一定不能大于transactionCapacitytransactionC...
2019-05-20 19:01:42
1594
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人