bert+tf1.11+cuda9.0+cudnn7.5+win10安装攻略

1 篇文章 0 订阅
1 篇文章 0 订阅

自己安装出错了很久,所以记录一下。

自己电脑原来是装好了cuda和cudnn和tf2.3,因为bert必须要用1.11,所以发现有如下方案:

1. 在conda中创建新的虚拟环境

在anaconda中,原有的环境是base环境,这里面装的是tf2.3,现在我们再创建一个新的环境(名字任意,此处叫tf1_11),里面装tf1.11即可。这方面的操作见:https://blog.csdn.net/lyy14011305/article/details/59500819

比如下面的操作可以在base环境和tf1_11中切换。。。

(tf1_11) C:\Users\Arsmart>activate base

(tf1_11) C:\Users\Arsmart>conda.bat activate base

(base) C:\Users\Arsmart>activate tf1_11

(tf1_11) C:\Users\Arsmart>

但是疑惑是,tf与cuda-cudnn的版本是否紧密连接?一个电脑也可以装多个版本的cuda-cudnn与不同版本的tf相匹配吗?

答案是可以的。介绍见这篇文章https://blog.csdn.net/qq_27825451/article/details/89135592

其中有趣的是,win10系统下还不需要每次切换cuda,而是tf会根据环境变量自动搜索所需要的cuda版本。在整个这个安装步骤结束后,为了之前的tf2.3版本,可以再补按照一次cuda10.2.。。。。

2. 新NVIDIA驱动-旧版cuda,不识别

遇到的第二个问题是,我的cuda安装遇到了不识别,错误图片如下:(图片搬运自https://blog.csdn.net/qq_15947787/article/details/77967457 感谢。)

很多回答说应该修改inf文件加入本机硬件id等。下面这篇回答认为,高版本的NVIDIA驱动和低版本的cuda就经常会发生这种不识别的现象,正常按照即可。阅读上面图片中的语句,后面也确实提示:正常安装即可。。。。我的安装结果表明:正常安装下去,是可以的。我之后的tf1.11可以正常使用。

https://www.pianshen.com/article/55631225011/

3. 缺少依赖库报错

但是在此之后再运行,还是会报错。我改安装tf1.11-cpu版本,可以正常运行。我不甘心,又研究了一段时间。发现很可能是tf依赖的其他的库没有安装成功,而一次性安装所依赖的库的方式。。。当然就是conda安装,conda安装相比于pip安装,可以自动带上很多辅助的库,非常方便。所以在conda中进行如下操作:

conda install tensorflow-gpu==1.11

但是第一次又报错了。报错如下:


CondaError: Downloaded bytes did not match Content-Length
  url: https://repo.anaconda.com/pkgs/main/linux-64/cudnn-7.0.5-cuda8.0_0.tar.bz2
  target_path: /home/yyf/miniconda3/pkgs/cudnn-7.0.5-cuda8.0_0.tar.bz2
  Content-Length: 261398285
  downloaded bytes: 47463195
————————————————
版权声明:本文为CSDN博主「月夜长影」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/feifei3211/article/details/80361227(这里与我非常相似,我的错误是cudnn-7.0.5-cuda8.0_0.tar.bz2换成mkl文件,问题的原因是一样的,可以参考这位博主的答案)

所以问题原因是下载太慢而超时,所以下载不完全。解决方法就是添加国内的源,按照这位博主的方法,我添加了源,又再一次:conda install tensorflow-gpu==1.11

这次就成功了,结果很简单,就一个词:done。如下所示。

 

如上图所示,在安装完之后我尝试了一下打开python,在python中引入tensorflow,虽然有一堆。。。警告,不过其实是可以运行的,关于如何解决这些警告,见此链接:https://blog.csdn.net/BigDream123/article/details/99467316

具体来说就是在pycharm中打开,然后点击进入报错的文件,把报错处的(.....,1)改为(.......(1,))也就是把1改为(1,)。具体情况还是见上述链接。

总结:

真是超级难安装。。。写本文的时候还在下载cuda10.2,马上下好了去装一下也不知道会不会有什么新的问题。不过起码目前bert是可以跑通。。。初步了。所以,也感谢各位分享的前辈,我也是收集了广大前辈的信息才能装好,谢谢!

 

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值