iconv命令详解 iconv命令详解一、需求二、描述三、举例一、需求我们大数据项目组,数据来源是各个源系统跑出来的文件,然后我们对这些文件进行处理,有些时候可能会存在乱码的问题,就需要转化一下格式二、描述-f encoding :把字符从encoding编码开始转换。 -t encoding :把字符转换到encoding编码。-l :列出已知的编码字符集合-o file :指定输出文...
row_number函数 row_number函数)错误的先分组后排序正确分组排序函数故事开始:前天室友收到中国移动苏州部的面试,问了一个窗口函数的问题,他提了一个问题,既然窗口函数实现的是组内排序,为什么我不可以先对数据细分组,然后在进行排序呢。然后,就有了一下的实验。错误的先分组后排序这显然是不对的,但是我也想了一下,怎么可以这样使用呢,group by不是去重了吗,怎么可能显示出来11 22 33 这种东西呢...
java 数据类型转换 java 数据类型转换一、基本数据类型二、数据类型大小三、基本类型转换方式3.1自动(隐式)转换3.2强制类型转换四 关于byte、short、char赋值与运算的强转规则4.1 不参与运算,整数直接量可以直接赋值给byte,short,char,不需要强转。4.2 byte,short,char型变量参与运算时,需要强转一、基本数据类型java的基本数据类型分为八种整数型(byte sh...
scala yield的使用方法 scala yield的使用方法今天无意间发现这个就琢磨了一下,就如下例子讲述一下自己的看法,希望有错的地方,大家能够指教指教。yield的用法一个句话,就是在for循环中,每次循环都会产生一个值,然后将每次产生的值保存,最后组成一个集合。话不多说,上代码例子:import java.io.Fileimport scala.io.Sourceobject test_io {...
Scala模式匹配 Scala的模式匹配1、典型的模式匹配场景1.1匹配字符串1.2匹配类型1.3匹配数组、元组、集合1.4匹配异常模式匹配是Scala中非常有特色,非常强大的一种功能。模式匹配,其实类似于Java中的swichcase语法,即对一个值进行条件判断,然后针对不同的条件,进行不同的处理。但是Scala的模式匹配的功能比Java的swich case语法的功能要强大地多,Java的swich cas...
SCALA的常用高阶函数 scala常用高阶函数// map->在列表的每个元素上计算一个函数,并且返回一个包含相同数目元素的列表def main(args:Array[String]) { val num = List(1,2,3,4) num.map((i:Int)=>i*2) for (n <- num.map((i:Int)=>i*2)) { prin...
hive常见参数调优 常见参数调优1、分区2、分桶3、group by 数据倾斜优化1、分区开启动态分区set hive.exec.dynamic.partition=turn;设置严格模式set hive.exec.dynamic.partition.mode=nostrict;(默认值 strict,避免全分区字段是动态,必须有至少一个分区字段是指定有值的。避免产生大量分区)2、分桶开启分桶set...
inceptor-plsql 系统预定义函数/过程 inceptor-plsql 系统预定义函数/过程一、查看预定义函数过程1.1 相关命令合集一、查看预定义函数过程1.1 相关命令合集查看已有函数或者存储过程--smy为库名,不指定的话,相当于对当前数据库进行操作 show PLSQL FUNCTIONS smy;查看一个plsql/函数的具体内容...
inceptor-pl/sql和sql的交互(db2方言) inceptor和sql的交互(db2方言)一、将select的返回值赋值给变量1.1将查询的结果赋值给变量二、 SELECT INTO三、存储过程和sql的交互3.1在存储中执行update,insert,merge等语句四、函数与SQL的交互五、游标六、动态sql6.1 EXECUTE IMMEDIATE一、将select的返回值赋值给变量1.1将查询的结果赋值给变量 !set plsq...