- 博客(6)
- 收藏
- 关注
RSS订阅原创 Sqoop hcatalog 在拉取数据时候DECIMAL精度丢失的解决办法
用sqoop --query选项 在查询的时候将decimal字段concat(field_name)为str类型 目前在查询国内论坛没有找到相关的解决办法
2018-10-13 22:13:45
972
1
原创 初学Flink -- hadoop包在加载时候的冲突问题
这几天，在Flink中 重写 自定义的类似于DateBucketer时，编译打包过程没有问题，不过在提交到flink集群上面时，出现了Flink的ClassLoader和java的ClassLoader对getFileSystem()方法返回值的定义问题 后来了解到Flink重写了org.apache.hadoop中的部分Class，导致我们在编译的时候可以用官方的包进行编译，打包也可以正常打包...
2018-08-16 16:23:00
1683
1
原创 Hive -- 增量同步数据脚本
if [ $# -eq 12 ]; then HIVE_DATABASE=$1 HIVE_TABLE_NAME=$2 DATA_DIR=$3 PARTITION_KEY=$4 KEY_FIELD_NAME=$5 MYSQL_HOST=$6 MYSQL_PORT=$7 MYSQL_DATABASE=$8 MYSQL_TABLE_NAME=$9 MYSQL_USERNAME=${...
2018-07-18 16:56:48
1287
原创 Shell学习 -- if判断
if的基本结构满足单一条件执行if [ $1 命令符 $2 ]; then commend fi满足单一条件执行一条命令，如果不满足执行另外的操作if [ $1 命令符 $2 ]; then commend1 else commend2 fi多个条件if [ $1 命令符 $2 ]; then commend1 elif [ $1 命令符 $2 ]; then ...
2018-07-16 13:48:02
288
原创 golang 学习 ---- diff with C,C++
与C语言比较是以包为引用单位的包内的方法和变量的使用范围是根据首字母是否大小写来定的if后面的条件可以不使用()switch 不用写break case后面可以加上多个条件，逗号分隔defer 后面的变量会在被return 之前释放有时会造成为申请到资源就释放在定义的时候就已经可以定义需要执行的方法变量定义和js很像var str string //先定义变量 str = "name" str1...
2018-07-11 13:08:42
322
原创 我学——同步和互斥
同步和互斥的区别在我看来 是在对问题的理解方便 同步的作用是为了让程序按照一定的顺序来执行 而互斥的目的是为了让同一时间只有规定数量的线程可以访问到资源
2017-01-20 15:26:05
221
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人