草稿1

一个实碎片可能包含多个虚碎片或者不包含

一个墟碎片对应一个广告位  一个广告位包含1个或多个产品

1个产品有1个或多个创意

系统（1：好耶，2：dfp，3： mfp，4：adsame）

遍历查找软连接:

find /data printf "%y %p \n" |awk '{if ($1 =="f")print $2}'|ll|grep "\->"

Linux时间格式设置标准字符串

%a 星期几的简写
%A 星期几的全称
%b 月分的简写
%B 月份的全称
%c 标准的日期的时间串
%C 年份的后两位数字
%d 十进制表示的每月的第几天
%D 月/天/年
%e 在两字 符域中，十进制表示的每月的第几天
%F 年-月-日
%g 年份的后两位数字，使用基于周的年
%G 年分，使用基于周的年
%h 简写的月份名
%H 24小时制的小时
%I 12小时制的小时
%j 十进制表示的每年的第几天
%m 十进制表示的月份
%M 十时制表示的分钟数
%n 新行 符
%p 本地的AM或PM的等价显示
%r 12小时的时间
%R 显示小时和分钟：hh:mm
%S 十进制的秒数
%t 水平制表 符
%T 显示时分秒：hh:mm:ss
%u 每周的第几天，星期一为第一天 （值从0到6，星期一为0）
%U 第年的第几周，把星期日做为第一天（值从0到53）
%V 每年的第几周，使用基于周的年
%w 十进制表示的星期几（值从0到6，星期天为0）
%W 每年的第几周，把星期一做为第一天（值从0到53）
%x 标准的日期串
%X 标准的时间串
%y 不带世纪的十进制年份（值从0到99）
%Y 带世纪部分的十制年份
%z，%Z 时区名称，如果不能得到时区名称则返回空字 符。
%% 百分号

#!/bin/sh

YESTERDAY=`date --date='1 day ago' +%Y-%m-%d`
hive -e "select e.url,e.pv from (select sum(pv) as pv,url from wap_pv where dt='$YESTERDAY' group by url) e join (select distinct(c.base) from (select a.url as base,b.url as new from (select distinct(url) from wap where dt='$YESTERDAY' ) a left outer join (select distinct(url) from wap where dt='${YESTERDAY}_new') b on (a.url=b.url)) c where c.new is null) f on (e.url = f.base)" > /data/diff/diff.txt

cat /data/diff/diff.txt | awk '$NF>1000' |sort -rn -k 2 >> /data/diff/diff_log/$YESTERDAY.log