- 博客(7)
- 收藏
- 关注
原创 tensorflow实现根据不同场景选择网络
推荐系统中,我们偶尔会将不同场景的数据放在一起学习一个ctr模型或者一个多目标模型。有时我们希望模型训练中每条样本选择自己场景的一个子网络。比如所有特征concat后,根据某一特征的值(比如标识场景的特征)来选择通过一个dense层。下面介绍一个比较简单的实现方法,思想就是特征过所有场景的子网络,最后根据场景标识来进行mask。...
2022-07-04 20:34:43 295 1
原创 tensorflow实现序列特征与id特征交叉
推荐算法里我们经常会对特征做交叉操作,如wide&deep算法的wide侧,同时用户的行为序列特征又是非常重要的特征,将用户的行为序列与候选集id交叉往往会带来不错的效果。这里我们主要用tensorflow的cross_hashed函数实现。...
2022-06-16 19:41:36 769
原创 tensorflow实现二分类中加权的交叉熵损失函数
在实际业务中往往需要改写loss函数,例如对正样本进行加权,然而tensorflow的api中并没有直接实现的方法可以调用。列如对所有正样本进行10倍加权,可以有以下两个实现方法:import tensorflow as tf# 设labels为一个batch中的标签,logits为一个batch中的模型输出labels = tf.constant([1, 0, 1, 0, 0, 0, 0, 0, 1])logits = tf.constant([1.0, -2.0, 7.9, 1.1, 7.
2021-12-01 14:40:18 2735
原创 es复制旧索引数据到新索引中
直接输入命令(不要复制粘贴,手动输入,否则可能会报解析错误):curl -H "Content-Type: application/json" -X POST http://127.0.0.1:9200/_reindex -d '{"source": {"index": "oldindex"}, "dest": {"index": "newindex", "op_type": "create...
2019-10-09 18:16:49 3377
原创 spark报错TreeNodeException: execute, tree: Exchange hashpartitioning
spark任务执行时报错如下问题:Exception in thread "main" org.apache.spark.sql.catalyst.errors.package$TreeNodeException: execute, tree:Exchange hashpartitioning可尝试在配置文件中加入这一行:--conf spark.cross.dc.inputs.lo...
2019-09-02 20:39:18 6163
原创 Python中关于list的一个陷阱
我们用以下2种方式创建一个一样的list:l = [["-"]*3]*3l2 =[['-', '-', '-'], ['-', '-', '-'], ['-', '-', '-']]print(l)print(l == l2 )print(l2[1])print(l2[1][1])我们得到的输出为:[['-', '-', '-'], ['-', '-', '-'], [...
2018-09-05 13:08:29 199
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人