tf.nn.embedding_lookup

tf.nn.embedding_look 通过参数 ids 查表检索params中对应位置的矩阵,进行维度的扩展,所以 传入的是一维矩阵如[None, 1],则输出 [None,1,embedding] 如果是多维的如[None, seq_length] ,则输 出[None, seq_length, embedding_size]

tf.nn.embedding_lookup(
    params,
    ids,
    partition_strategy='mod',
    name=None,
    validate_indices=True,
    max_norm=None
)

作用:在params表中按照ids查询向量。params是一个词表,大小为NH,N为词的数量,H为词向量维度的大小。图中的params大小为310,表示有3个词,每个词有10维。一句话中有四个词,对应的id为0,2,0,1,按照ids在params中查找。(注意此处只是举例说明,params可以是任意含义的表,不一定是词表,可以是张量,可以是list)
在这里插入图片描述

import tensorflow as tf

    params = tf.constant([[0.1, 0.4, 0.5, 7.0, 6.4, 1.2, 0.5, 0.3, 3.3, 2.0],
                          [0.3, 0.4, 0.9, 0.8, 0.5, 0.3, 0.7, 0.5, 0.8, 3.2],
                          [0.4, 0.9, 1.1, 4.3, 3.4, 0.2, 0.3, 0.2, 0.5, 0.1]])
    ids = tf.constant([0, 2, 0, 1])
    ids_lookup =  tf.nn.embedding_lookup(params, ids)
    print("一维度的情况:ids:\n",ids,"\nids_lookup:\n", ids_lookup)

    ids_2 = tf.constant([[0, 2, 0, 1]])
    ids2_lookup = tf.nn.embedding_lookup(params, ids_2)
    print("多维的情况:ids_2:\n", ids_2, "\nids_2_lookup:\n", ids2_lookup)

运行结果

tf.nn.embedding_lookup

tf.nn.embedding_lookup_sparse

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值