余弦相似度总结

余弦相似度衡量的是空间向量的夹角,体现在方向上的差异。

余弦值越接近1,夹角越接近0度,两个向量越相似,叫"余弦相似性"。

欧氏距离能够体现个体数值特征的绝对差异;

余弦相似度是从方向上区分差异,对数值不敏感,余弦相似度对绝对数值不敏感,没法衡量每个维数值的差异。

调整余弦相似度:两个评分(1, 2)和(4, 5),可用(1 + 2 + 4 + 5)/ 4 = 3获取平均值

在所有维度上减去一个均值,调整后为(-2,-1)和(1,2),再用余弦相似度计算,得到-0.799,相似度为负值,两个方向不同。

from sklearn.metrics.pairwise import cosine_similarity

a=[[1,3,2],[2,2,1]]

使用cosine_similarity,传入一个变量a时,返回数组的第i行第j列表示a[i]与a[j]的余弦相似度

cosine_similarity(a)

array([[1. , 0.89087081],

    [0.89087081, 1. ]])

使用pairwise_distances,注意该方法返回的是余弦距离,余弦距离= 1 - 余弦相似度,

同样传入一个变量a时,返回数组的第i行第j列表示a[i]与a[j]的余弦距离

from sklearn.metrics.pairwise import pairwise_distancespairwise_distances(a,metric="cosine")array([[0. , 0.10912919],       [0.10912919, 0. ]])

余弦距离:一减去余弦相似度;

 余弦相似度取值范围是[-1,1];方向相同的向量间的相似度是1;余弦距离的取值范围是[0,2]。

余弦距离不是严格意义上的距离,根据数学定义,在一个集合中,如果一对元素可确定一个实数,使得非负性,对称性和三角不等式成立,则该实数可称为这对元素之间的距离

1 非负性:余弦距离的取值范围为[0,2],满足非负性的性质

2 对称性:dist(A,B)=1−cosθ=dist(B,A),满足对称性

3. 余弦距离不满足三角不等式的性质

 

参考:

余弦相似度和余弦距离的推导与理解 - 努力奋斗的阿贝拉 - 博客园

  • 2
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 余弦相似度是一种计算向量之间相似度的方法,常用于文本相似度计算。在 Python 中,可以使用以下代码来计算两个向量的余弦相似度: ```python import numpy as np def cosine_similarity(a, b): cos_sim = np.dot(a, b) / (np.linalg.norm(a) * np.linalg.norm(b)) return cos_sim ``` 其中,a 和 b 是两个向量,np.dot() 函数计算两个向量的点积,np.linalg.norm() 函数计算向量的范数。返回值是 a 和 b 的余弦相似度,取值范围为 [-1, 1]。当余弦相似度为 1 时,表示两个向量完全相似;当余弦相似度为 -1 时,表示两个向量完全不相似;当余弦相似度为 0 时,表示两个向量正交,方向完全不同。 ### 回答2: 余弦相似度是一种用于比较两个向量之间的相似性的度量方法。在Python中,我们可以使用scikit-learn(sklearn)库来计算余弦相似度。 首先,我们需要导入相应的库: ```python from sklearn.metrics.pairwise import cosine_similarity import numpy as np ``` 然后,我们需要创建两个向量用于比较。向量可以是列表、数组等数据结构。这里我们以两个列表作为例子: ```python vector1 = [1, 2, 3, 4, 5] vector2 = [2, 4, 6, 8, 10] ``` 接下来,我们需要将这两个向量转换为numpy数组形式,以便进行计算: ```python vector1 = np.array(vector1).reshape(1, -1) vector2 = np.array(vector2).reshape(1, -1) ``` 然后,我们可以使用cosine_similarity函数计算余弦相似度: ```python similarity = cosine_similarity(vector1, vector2) ``` 最后,我们可以打印出计算结果: ```python print(f"The cosine similarity between vector1 and vector2 is: {similarity[0][0]}") ``` 这样就可以得到两个向量之间的余弦相似度总结一下,要使用Python计算余弦相似度,首先导入相应的库,创建待比较的向量,将向量转换为numpy数组形式,然后使用cosine_similarity函数计算余弦相似度,最后打印出结果即可。 ### 回答3: 余弦相似度是一种衡量两个向量之间相似性的方法,常常用于文本相似度的计算。在Python中,可以使用scikit-learn库中的cosine_similarity函数来计算余弦相似度。 首先,需要将文本数据转换为向量表示。可以使用CountVectorizer或TfidfVectorizer等向量化方法,将文本转换为稀疏矩阵。假设有两段文本A和B,使用TfidfVectorizer进行向量化。 ```python from sklearn.feature_extraction.text import TfidfVectorizer from sklearn.metrics.pairwise import cosine_similarity # 定义两段文本 text_a = "我爱中国" text_b = "中国是一个伟大的国家" # 创建TfidfVectorizer对象 vectorizer = TfidfVectorizer() # 将文本向量化 vectorized_text = vectorizer.fit_transform([text_a, text_b]) # 计算余弦相似度 similarity = cosine_similarity(vectorized_text[0], vectorized_text[1])[0][0] print(f"文本A与文本B的余弦相似度为:{similarity}") ``` 上述代码中,使用TfidfVectorizer将文本向量化,并计算了文本A和文本B之间的余弦相似度。结果会打印出文本A与文本B的余弦相似度。 需要注意的是,向量化和计算余弦相似度的过程中,文本预处理(如中文分词、停用词处理等)也是非常重要的,可以使用其他的第三方库(如jieba)进行相关处理操作。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值