array_intersect(array1, array2)：返回一个包含所有同时在数组array1和数组array2中的元素的数组（数组array1和数组array2的交集元素)。split(reverse(concat_ws(delimiter,array_sort(array))),delimiter)：按。array_position(array, value)：返回value在数组中的位置，如果不存在则返回。数组array2中的元素（数组array1比数组array2多的元素）。

shell脚本通过curl调用API时，变量值是中文时，需要编码。在此记录一下我用的urlEncode编码和解码的方式（

括号以外的字符(不包含括号)替换'acbc(cde)efeg' ==> 'a#b#(cde)#f#g'select regexp_replace(col,'(c+|e+)(?=[^\\)]*(\\(|$))','#')from (select 'acbc(cde)efeg' col) t;括号以内的字符(不包含括号)替换'acbc(cde)efeg' ==> 'acbc(#d#)efeg'select regexp_replace(col,'(c+|e+)(?=[.

shell命令判断文件夹是否是挂载点命令：mountpoint选项如下：-q 安静模式，不会打印任何东西。-d 在标准输出上打印文件系统的主／次设备号。-x 在标准输出上打印块设备的主／次设备号。如果是挂载点返回0，如果不是就返回非0。检查文件夹是否是挂载点，如果不是，执行挂载#检查文件夹是否挂载mountpoint -q /data220mflag=$?if [ $mflag != 0 ];thenecho ...

刚开始学习hadoop，所以边学边做笔记。本机系统win7（由于要装三个虚拟机，内存最少需要8G以上：每个虚拟机2G，留给本机2G）使用的软件VMware Workstation 11linux系统 Centos 6.5（据说Centos 6.*和Centos 7.*会有些不同，以后再试试）1.VMware 安装2.创建虚拟机。    内存：2G    硬盘：20G    CPU：2个2核    ...

USE [Test]GO/****** Object:  UserDefinedFunction [dbo].[GetDistinct]    Script Date: 12/09/2015 17:09:29 ******/SET ANSI_NULLS ONGOSET QUOTED_IDENTIFIER ONGOALTER function [dbo].[GetDist

with a  as (select pn ,row_number()over(partition by pn order by pn) row_num from dianlu_bak_160115)--select pn,COUNT(1),max(row_num) maxr,MIN(row_num) minr from a group by pn having COUNT(1)>1del

1.简介：SQL Server 中的窗口函数帮助你迅速查看不同级别的聚合，通过它可以非常方便地累计总数、移动平均值、以及执行其它计算。窗口函数功能非常强大，使用起来也十分容易。可以使用这个技巧立即得到大量统计值。窗口是用户指定的一组行。 开窗函数计算从窗口派生的结果集中各行的值。2.适用范围：排名开窗函数和聚合开窗函数.也就是说窗口函数是结合排名开窗函数或者聚合开窗

lag和lead函数介紹 LEAD（EXPR， 〈OFFSET〉， 〈DEFAULT〉）访问之后的行，OFFSET是缺省为1 的正数，表示相对行数，DEFAULT是当超出选定窗范围时的返回值（如最后行不存在之前行） 实例：  month