优化计算相似度矩阵

任务:现有特征矩阵 X ∈ R N × F X\in R^{N\times F} XRN×F,N为样本个数,F为特征大小,需要计算相似度矩阵 A A A A i j = A j i A_{ij}=A_{ji} Aij=Aji为第i个样本和第j个样本的相似度,利用欧式距离求解两个样本间的距离:
A i j = A j i = ∑ f = 1 F ( X i f − X j f ) 2 A_{ij}=A_{ji}=\sum_{f=1}^{F}(X_{if}-X_{jf})^{2} Aij=Aji=f=1F(XifXjf)2

未优化的双重循环写法
def dobule_loop(X):
    N = len(X)
    A = numpy.zeros((N, N))
    for i in range(N):
        for j in range(i+1, N):
            A[j][i] = A[i][j] = numpy.sum(numpy.square(X[i]-X[j]))
    return A
优化写法

去掉第二个循环,使用批量计算,例如第i个样本需要和i+1到N的样本计算欧式距离,则将i+1到N个样本取出与第i个样本批量计算

def optimize_loop(X):
    N = len(X)
    A = numpy.zeros((N, N))
    for i in range(N):
        deta = numpy.sum(numpy.square(X[i]-X[i+1:N]), axis=1)
        A[i, i+1: N] = deta
        A[i+1:, i] = deta
    return A

时间上,后者比前者高效,例如当X的维度是(4000,3)时,前者时间为43.92秒,而后者只需0.56秒。

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值