基于pytorch的sentence_transformers与tensorflow的冲突

情况:

在已有的基于tensorflow的代码中,加入了文本分析的sentence_transformers,代码在我自己电脑中是可以跑的通的。
在这里插入图片描述
但是上传到老师的服务器中,就无法跑了,也不报错,就是卡住。
卡住的截图

代码

"""
文件:demo2
时间:2023-08-28
作者:R
描述:测试tensorflow和sentence_transformers
知识点:
"""

import tensorflow as tf
from sentence_transformers import SentenceTransformer


def demo1():
    embeddings = tf.constant([
        [1, 2, 3, 4],
        [11, 12, 13, 14],
        [21, 22, 23, 24],
    ])
    print(embeddings.shape)
    ids = tf.constant([
        [0, 1],
        [0, 2]
    ])
    print(ids.shape)


def demo2():
    text_model = SentenceTransformer('paraphrase-TinyBERT-L6-v2')
    sentence1 = 'Square Root'
    embedding1 = text_model.encode(sentence1, convert_to_tensor=True)
    print(type(embedding1))
    print(embedding1.shape)
    print(embedding1)
    sentence2 = 'Addition and Subtraction Positive Decimals'
    embedding2 = text_model.encode(sentence2, convert_to_tensor=True)
    print(embedding2.shape)
    print(embedding2)


if __name__ == '__main__':
    print("hello,world")
    demo1()
    demo2()

解决:

开始以为是包的版本问题,各种校对包的版本,发现自己的电脑和老师的服务器都是一致的。

后面注意到这个sentence_transformers是基于pytorch的,而在之前安装虚拟环境的时候,师兄说pytorch的环境和tensorflow的环境最好分开安装,可能会产生冲突,于是就在想是不是这个原因。
在这里插入图片描述

后面查询到果然是,tensorflow如果和pytorch一起出现的话,如果先跑tensorflow,那么就会把显卡占满。
在这里插入图片描述
所以只需要调整一下顺序,让基于pytorch的sentence_transformers先导入,就可以了。

import tensorflow as tf
from sentence_transformers import SentenceTransformer
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
回答: 当出现ModuleNotFoundError: No module named 'sentence_transformers'错误时,这意味着你的环境中没有安装sentence_transformers库。为了解决这个问题,你可以使用以下命令来安装sentence_transformers库:pip install -U sentence-transformers。同时,你还需要确保你的环境中已经安装了transformers库,你可以使用pip install -U transformers来安装。如果你在Windows环境下运行模型时遇到了这个问题,可能是因为你没有切换到正确的环境。你可以尝试使用conda activate命令来切换到你所需的环境,比如conda activate pytorch。如果在切换环境时遇到了问题,可能是因为你的shell没有正确配置使用conda activate命令。你可以尝试运行conda init命令来初始化你的shell,并根据提示关闭并重新启动你的shell。 #### 引用[.reference_title] - *1* [2021-07-31](https://blog.csdn.net/weixin_49050875/article/details/119282830)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [ModuleNotFoundError: No module named ‘transformers‘,已经安装了transformers库](https://blog.csdn.net/weixin_44562957/article/details/125117083)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值