python环境搭建
文章平均质量分 59
python学习中通用环境搭建和知识记录;内容多有粗糙之处,承蒙不弃;
墨理学AI
计算机视觉领域,新晋砖家 ☞
未来可期,欢迎和墨理一起学 AI 》 博主创建了很多CV领域的技术Club,欢迎主页左侧下方,Contact my WeChat;
展开
-
TensorFlow1.2~2.1各GPU版本与CUDA对应版本、tensorflow-gpu 的安装测试
TensorFlow1.2~2.1各GPU版本与CUDA对应版本、tensorflow-gpu 的安装测试原创 2020-07-14 17:21:45 · 10506 阅读 · 0 评论 -
conda与 pip 和 virtualenv关系理解
有conda就是一个包管理原创 2019-01-11 11:15:35 · 12905 阅读 · 3 评论 -
Pytorch0.4.0环境搭建之详细教程——查看当前 Cuda—Cudnn 版本
???? 版权: 本文由【墨理】原创、在CSDN首发、保质保量❤️ 如果文章对你有帮助、欢迎一键三连文章目录???? 基础信息???? 查看系统信息???? 查看当前 Cuda 版本???? 查看当前 Cudnn 版本???? 开始搭建 pytorch=0.4.0 环境???? 第一步 Conda 创建环境 torch04???? 第二步:安装 pytorch=0.4.0???? 第三步:安装 其它依赖库???? 其它版本 Pytorch 安装???????? 文末专栏推荐 ????????❤️ 人生原创 2021-11-09 11:14:52 · 2089 阅读 · 1 评论 -
python格式化代码【自动排版】 yapf、black风格选择 | yyds
文章目录三种主流风格最新 star 数截图统计截止 2021/07/19yapf 【get】blackautopep8三者区别为什么会关注这个?三种主流风格最新 star 数截图统计截止 2021/07/19yapf 【get】pip install yapfblackhttps://github.com/psf/blackpip install git+git://github.com/psf/blackautopep8https://github.com/hh原创 2021-07-19 17:01:32 · 5611 阅读 · 2 评论 -
Linux下 pytorch 1.8的极简安装 | 快速根据官网命令安装 pytorch(超详细)
Linux下 pytorch 1.8的极简安装进如 pytorch 主页https://pytorch.org/根据你的机型进行选择copy 给出的命令 到 服务器 shell 命令窗口,执行即可pip3 install torch==1.8.1+cu111 torchvision==0.9.1+cu111 torchaudio==0.8.1 -f https://download.pytorch.org/whl/lts/1.8/torch_lts.html这里涉及到一个 .原创 2021-07-14 16:24:46 · 2895 阅读 · 0 评论 -
action=‘store_true‘ 理解和测试 | 简记
store_true 是指带触发 action 时为真,不触发则为假, 即默认 False ,传参 则 设置为 Truestore_false 则与之相反运行示例代码 test.py 如下:import sysimport argparsedef parse_args(): parser = argparse.ArgumentParser(description='run a test ') parser.add_argument('-t', '--threshol..原创 2021-04-19 15:10:46 · 2053 阅读 · 0 评论 -
error: (-215:Assertion failed) !_src.empty() in function ‘cvtColor‘ | 简记
运行代码如下:def getRes(path,threshold=100): image = cv2.imread(path) gray = cv2.cvtColor(image, cv2.COLOR_BGR2GRAY)报错如下:Traceback (most recent call last): File "iqa.py", line 53, in <module> getRes(path, threshold) File "iqa.py", l.原创 2021-04-19 14:34:37 · 1123 阅读 · 0 评论 -
pip源 | 实用的库安装下载加速设置 | pip install pandas 指定 源
pip源 | 实用的库安装下载加速设置 | pip install pandas 指定 源原创 2021-04-19 09:36:25 · 958 阅读 · 0 评论 -
autorank 是个什么东西 | 水文一篇,拿走不谢
autorank 一个 2020 年 xx 推出的一个 Python 库这里简单为大家做一个引路Autorank is a simple Python package with one task: simplify the comparison between (multiple) paired populations.gitHub 有相应的示例教程,大家应该很容易看懂的https://github.com/sherbold/autorank目测,它的主要作用是 一个 Tree 的.原创 2021-03-25 12:29:30 · 260 阅读 · 0 评论 -
Linux 可以安装多个版本的Cuda 吗 | 如何进行 Cuda 的版本切换
关于Cuda 安装的简单的问题总结windows10下安装多个版本cuda、cudnn,切换使用方法一台 Linux 服务器, cuda9 和 cuda 10 可以共存吗?这样的情况是可以共存的:比如:已经安装了高版本的cuda 和 对应驱动, 而 这个驱动 同时也支持 低版本的CUDA运行,这种情况通过 修改 配置 文件的方式 ,可以 自由进行 cuda 的切换。但是如果系统先安装的 cuda9 和对应驱动, 然后你想要给当前 非 Root 用户安装的 cuda10 ,因为 没有 ro.原创 2021-03-17 12:32:45 · 4696 阅读 · 0 评论 -
Windows10下安装多个版本cuda、cudnn,切换使用方法|简记
参考链接,感谢原作者问题:win10系统 同时安装了 cuda10.1 和 cuda 9.0,默认使用的是cuda10.1目前1.x 版本的 tensorflow-gpu 只适合 cuda 9.0,因此我需要把默认的cuda换为 9.0 。亲测可用方法如下: - 1 哪个版本不用时,就把那个环境变量中的path路径暂时删除 - 2 需要用的版本,就在环境变量中将CUDA_PA...原创 2020-04-14 18:36:42 · 7269 阅读 · 2 评论 -
Error: Unable to find ‘numpy.i‘ | 解决方法
本博文是 执行 swig 转换 Python 过程中 ,一条 命令遇到的报错,问题解决简单记录;gcc -c -fpic example.c example_wrap.c -I/home/mili/anaconda3/include/python3.6m遇到的报错如下:cos_doubles.i:13: Error: Unable to find 'numpy.i'解决方法: 把 numpy 源码中的 tools/swig 安排到 当前使用的 numpy 的 安装目录下nump.原创 2021-03-17 11:42:53 · 891 阅读 · 0 评论 -
查看 pip 安装 库的位置和版本信息 | pip show numpy
获取当前 numpy 的信息pip show numpy输出如下:Name: numpyVersion: 1.14.0Summary: NumPy: array processing for numbers, strings, records, and objects.Home-page: http://www.numpy.orgAuthor: NumPy DevelopersAuthor-email: numpy-discussion@python.orgLicense: BS.原创 2021-03-17 11:21:00 · 2076 阅读 · 0 评论 -
查看当前使用的Python 版本和解释器位置
查看当前使用的Python 版本和解释器位置# 查看 python 版本python -VPython 3.6.4 :: Anaconda, Inc.# 默认的 conda 环境which python/home/moli/anaconda3/bin/python# 某 conda 环境下的 python 位置which python/home/moli/anaconda3/envs/torch11/bin/pythonLinux 下 进入 Python 交互命令.原创 2021-03-12 14:47:01 · 3401 阅读 · 0 评论 -
Linux下cuda10.0安装Pytorch和Torchvision——啥版本都能装
服务器配置:RTX 2080 8G cuda10.0这里安装的 版本为 pytorch1.1.0 torchvision0.3.0 ,使用conda 可以进行正确安装,安装命令来自 pytorch 官方.正确可用的安装方法如下:(亲测可用)conda create -n nice python=3.6.9conda activate niceconda install pytorch==1.1.0 torchvision==0.3.0 cudatoolkit=.原创 2020-08-17 17:30:07 · 14211 阅读 · 5 评论 -
指定GPU运行和训练 python程序 、深度学习单卡、多卡 训练GPU设置【一文读懂】
一、命令行运行python程序时首先查看哪些GPU空闲,nvidia-smi显示当前GPU使用情况。nvidia-smi如下图所示:服务器中的两个显卡,编号为0、1 . 都被同一个进程 PID 3016 占用。指定空闲的GPU运行python程序CUDA_VISIBLE_DEVICES=0,1 python test.py原创 2020-06-30 11:09:29 · 21295 阅读 · 1 评论 -
查看CUDA和cuDNN的版本号 | Win10安装CUDA10和cuDNN
1、查看cuda版本cat /usr/local/cuda/version.txt2、查看cudnn版本cat /usr/local/cuda/include/cudnn.h | grep CUDNN_MAJOR -A 2操作示例如下:(py366) nfz@Qlab:~$ cat /usr/local/cuda/version.txtCUDA Version 8.0.61(...原创 2019-04-24 20:06:38 · 9664 阅读 · 1 评论 -
pytorch服务器本地安装 | 简记
pytorch本地安装因为 使用如下命令:conda install pytorch torchvision cudatoolkit=10.1 -c pytorch在服务器安装时,pytorch 下载慢,总是中断,因此单独下载了对应的压缩包,copy到服务器目录下安装;下载之后,copy到服务器目录下;conda install pytorch-1.6.0-py3.8_cuda10.1.243_cudnn7.6.3_0.tar.bz2 然后再次 执行:conda install py原创 2020-09-25 14:45:35 · 769 阅读 · 1 评论 -
Linux下cuda9.1安装Pytorch和Torchvision|简记
Linux下cuda9.1安装Pytorch和Torchvision|简记Pytorch和Torchvision版本对应我自己尝试了 该链接中对应的许多版本,然而大都报错:AssertionError: The NVIDIA driver on your system is too old (found version 9010).Please update your GPU driver by downloading and installing a newversion from the原创 2020-07-03 20:41:51 · 6910 阅读 · 2 评论 -
解决 cudaGetDevice() failed. Status: CUDA driver version is insufficient for CUDA runtime version
tensorlayercn中文文档原创 2019-07-14 15:23:33 · 14737 阅读 · 0 评论 -
Failed to initialize NVML: Unknown Error 的解决方法——简记
服务器环境: Windows Server 2012 R2 64位操作系统,基于x64的处理器缘由: 升级服务器驱动之后,发现在cmd窗口下使用 nvidia-smi.exe相关命令查看GPU情况时,报错如下:Failed to initialize NVML: Unknown Error额,网上查了一堆资料,回头发现250,难受我认为可能有效的解决方法为:步骤一:因为是新服务器,所以...原创 2019-07-14 20:35:38 · 30182 阅读 · 0 评论 -
Windows下查看GPU(NVIDIA)使用情况
查看服务器GPU信息nvidia-smi.exe -h查看该命令参数帮助信息nvidia-smi.exe -h一秒钟更新一次GPU信息nvidia-smi.exe -l 1原创 2019-07-15 16:40:54 · 4088 阅读 · 0 评论 -
python虚拟环境--virtualenv
virtualenv 是用来为一个应用创建一套“隔离”的Python运行环境同一个服务器下,多人共同使用一个服务器进行不同的开发,可以避免软件包版本冲突感谢原作者:参考链接如下:https://www.cnblogs.com/technologylife/p/6635631.htmlhttps://www.cnblogs.com/liuyansheng/p/6141197.html...转载 2018-12-28 16:16:36 · 258 阅读 · 0 评论 -
pip安装指定版本的应用 | conda安装指定版本的应用
在使用conda搭建环境时,首先会使用conda来安装相应的库,conda找不到可以安装的源,再切换为pip安装conda info 查看库所需的相关依赖conda info tensorflow-gpu=1.2.1conda install 安装指定版本的库conda install pandas==0.21.1pip3 install 安装指定版本的库pip3 install ...原创 2019-02-01 14:31:24 · 3236 阅读 · 0 评论 -
pip下载包的默认路径
windows系统:c:\用户(你的用户名)\AppData\Local\pip\cache\比如我的:C:\Users\Administrator\AppData\Local\pip\cache如下图所示,可以看出来,这些下载的缓存文件命名并不是我们直接可以看出来是什么的,因此如果要找到对应的安装库,我觉得按下载时间,也许是个不错的方法。但是更建议的方法还是,通过查看自己所安装库的...原创 2019-07-14 12:12:19 · 26237 阅读 · 0 评论 -
jupyter 远程访问配置:KeyError: 'allow_remote_access'
今天在配置服务器 的jupyter notebook的时候遇见了下面的错误KeyError: 'allow_remote_access'jupyter都是常规方法配置的,后面发现在配置jupyter_notebook_config.py的时候少加了下面的东西,于是输入编辑jupyter_notebook_config.py 在配置里添加:c.NotebookApp.allow_remot...原创 2019-01-29 11:37:26 · 2797 阅读 · 0 评论 -
ubuntu 使用Docker搭建anaconda+python基本环境 | Docker基础使用
ubuntu 16 使用Docker安装anaconda搜索可用镜像docker search anaconda拉取你中意的镜像docker pull continuumio/anaconda3 查看已有镜像docker images启动该镜像并且运行bash命令docker run -t -i continuumio/anaconda3 /bin/bash查看pytho...原创 2019-01-03 22:01:37 · 15098 阅读 · 8 评论 -
给 jupyter-notebook 添加 python conda 环境的 kernel | 正确实用 | 有效整理
方法一1.激活环境source activate speechSep2.安装ipykernelconda install ipykernel3.将环境写入到notebook中python -m ipykernel install --user --name 环境名称 --display-name &amp;amp;amp;amp;amp;quot;在notebook中显示的环境名&amp;amp;amp;amp;amp;quot;我的执行命令如原创 2019-01-22 20:35:55 · 1493 阅读 · 1 评论 -
离线下载pip包进行安装 | 服务器机器不能连接外网 |
参考链接服务器机器不能连接外网,但是需要在上面安装python-package通过另外一台能上网的Linux主机1. 下载需要离线安装的Packages安装单个Package$ pip install &lt;package&gt; --download /tmp/offline_packages安装多个Packages$ pip install --download /tmp/o...原创 2019-01-28 11:57:53 · 931 阅读 · 0 评论 -
Ubuntu下生成 libsvm.so.2 文件
官网下载链接如图:点击下载对应的zip或者tar.gz文件即可,copy到Linux服务器环境我是copy到自己使用conda建立的独立环境。解压后cd libsvm-3.23/make cd pythonmake即可在 libsvm-3.23 目录下生成你想要的libsvm.so.2,然后copy到你需要的位置即可。参考链接如下,非常感谢原作者:libsvm官网Ub...原创 2019-01-22 16:56:38 · 576 阅读 · 0 评论 -
RuntimeError: To use MKL 2018 with Theano either update the numpy conda packages to their latest
错误参考链接环境:Ubuntu - 16.04Python - 3.5.5错误描述:Import theanoTraceback (most recent call last): File "/root/anaconda3/envs/mysep355/lib/python3.5/configparser.py", line 1135, in _unify_values ...原创 2019-02-01 15:13:47 · 1845 阅读 · 4 评论 -
Linux pip 手动安装(建议切换到 Root用户下,进行软件的安装)
去官网下载 pip-18.0.tar.gz pip下载地址, 通过 ftp copy 到你存放安装包的任意目录,在该目录下 使用命令解压:tar zxvf pip-18.0.tar.gz 进入解压的目录 执行命令:python setup.py install 即可安装成功...原创 2018-08-27 14:57:41 · 1609 阅读 · 0 评论 -
Anaconda虚拟环境跨平台迁移和直接整体迁移(不用.yml文件和重新下载package)
直接把一台Linux机上的Anaconda envs下的某一个环境整体迁移到另一台Linux机上的Anaconda envs下可以成功启动该环境cd /root/anaconda3/envs zip -r speechSep.zip speechSep这个环境压缩之后也有3个G,copy到有文件传输限制的服务器,可能还需要分包传输copy 到另一台服务器(同位Linux服务器)之...原创 2019-01-27 14:17:58 · 4250 阅读 · 0 评论 -
AttributeError: module ‘torch‘ has no attribute ‘device‘ 错误处理办法
device=torch.device("cuda" if torch.cuda.is_available() else "cpu"),AttributeError: module 'torch' has no attribute 'device'原创 2019-01-22 11:10:54 · 51547 阅读 · 6 评论 -
uis-rnn语音分离配置流程
语音分离uis-rnn网址依赖项:DependenciesThis library depends on:python 3.5+numpy 1.15.1pytorch 0.4.0scipy 1.1.0 (for evaluation only)部署安装流程:3.5.5conda create -n uisRnn python=3.5.5conda activate u...原创 2019-01-31 20:29:52 · 2273 阅读 · 0 评论 -
jupyter插件安装
jupyter插件安装转载 2019-01-31 15:50:08 · 4086 阅读 · 0 评论 -
conda环境导出 | 安装库导出 到 environment.yaml 和 requirements.txt | pip和conda安装指定版本的库
conda导出已有环境:conda env export &gt; environment.yaml环境会被保存在 environment.yaml文件中。 当我们想再次创建该环境,或根据别人提供的**.yaml**文件复现环境时,可以:conda env create -f environment.yaml就可以复现安装环境。移植过来的环境只是安装了你原来环境里用conda i...原创 2019-01-25 18:01:27 · 13635 阅读 · 6 评论 -
No module named 'parameterized'
No module named 'parameterized'则安装pip install nose-parameterized或者conda install nose-parameterized原创 2019-02-11 17:26:43 · 2262 阅读 · 3 评论 -
tensorlayer 安装| 指定 pip 的源
tensorlayer 安装命令,直接使用pip和conda安装都不行,因此指定pip的源进行安装就OK啦:pip install --upgrade -i https://pypi.tuna.tsinghua.edu.cn/simple tensorlayer原创 2019-04-23 18:03:53 · 1263 阅读 · 0 评论 -
jupyter notebook中matplotlib绘图包的中文乱码问题 —— 转载
感谢原作,实测简洁、可用的教程查找matplotlib路径,输出大致如下:import matplotlibmatplotlib.matplotlib_fname()安装SimHei字体字体链接:百度网盘链接 密码:5vn4下载好的字体放到xxx/matplotlib/mpl-data/ttf下即可修改配置文件,配置文件在第一步的matplotlib路径下,添加内容如下...转载 2019-03-21 15:22:55 · 982 阅读 · 0 评论