- 博客(4)
- 收藏
- 关注
转载 hive partition里面用函数 以及动态分区
想完成类似这样一个需求:insert overwrite table ... partiton(dt=date_sub('2019-03-13',2))当然这样子是行不通的,partition后面那个括号里是不能用函数的,怎么办呢?网上一顿狂搜,找到了一个解决办法!动态分区上两个链接就懂啦:https://stackoverflow.com/questions/44...
2019-05-28 11:32:00
623
转载 hive partition order by 和 group by 的区别
今天学到一个新技巧,求累加和:sum over (partition order by)一直没想清楚和group by 的区别,灵光闪现找到了本质区别:partition by 不改变数据行数,原来多少行还是多少行,group by 改变行数,只保留了group by 之后的结果。下面这个例子还不错,供参考:https://www.cnblogs.com/lcngu/p/...
2019-05-21 13:48:00
788
转载 基于样例的迁移学习:密度比估计的不可或缺性
基于样例的迁移学习:密度比估计的不可或缺性工作中遇到需要用迁移学习解决的风控问题:贷中模型,一个新的项目,如何冷启动。1)目标域没有标签,即不知道未来是否逾期。2)没有足够的训练数据。新项目的数据分布和旧项目不同,P(y|x) 假设相同, 但P(x)必定不同,此时需要用到密度比估计。估计出密度比之后,再对抽样后的源域数据进行训练,以达到在目标域上更好的效果。cov...
2019-03-14 14:26:00
171
转载 吴恩达深度学习笔记--梯度消失和梯度爆炸
看吴恩达老师的视频觉得有些地方没有点透。知乎这篇文章不错。详解深度学习中的梯度消失、爆炸原因及其解决方法转载于:https://www.cnblogs.com/amydi/p/10521419.html...
2019-03-13 10:29:00
337
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人