机器学习与深度学习开发环境Python3.6（win10-64）全新自主安装过程

最新推荐文章于 2024-06-30 01:32:34 发布

肖永威

最新推荐文章于 2024-06-30 01:32:34 发布

阅读量1.2k

点赞数

分类专栏：人工智能及Python 文章标签：人工智能 python

本文链接：https://blog.csdn.net/xiaoyw71/article/details/107430289

版权

人工智能及Python 专栏收录该内容

127 篇文章 41 订阅

订阅专栏

Python工作环境有多种安装方法，比如Anaconda，但是本文是以自主方式安装、搭建机器学习与深度学习Python开发环境，以此方式方便深入了解、掌握各种工具包、第三方应用的使用管理，为了避免“重复造轮子”，通过本文总结早期环境部署及开发中经验。

安装python的方法有很多种，数据分析方面比较常用Anaconda。Anaconda是一个开源的Python发行版本，其包含了conda、Python等多个科学包及其依赖项，也可以使用Miniconda这个较小的发行版，仅包含conda和 Python。Anaconda可以管理包，就是能够安装、更新、移除工具包，比如Numpy、Scipy、pandas、Scikit-learn等数据分析中常用的包；也可以管理环境，能够创建、访问、共享、移除环境，用于隔离不同项目所需要的不同版本的工具包，所以，我们可以建立 Python2 和 Python3 两个环境，来分别运行不同版本的 Python 代码。

1 Python安装

我近期使用Python 3.6版本（未换最新版本），由于安装比较简单，此处略去python安装过程。其中，安装路径为D:\Python\Python36。（网站https://www.python.org/downloads/windows，下载python3.6.7-Win10-64版本请点击）
在这里插入图片描述

安装完成后，需要配置环境变量，如下图所示。在这里插入图片描述

2 Python扩展包安装过程

2.1 图像处理

第一步，安装绘图包
D:>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\matplotlib-3.0.3-cp36-cp36m-win_amd64.whl
其中：
Looking in indexes: https://pypi.tuna.tsinghua.edu.cn/simple 为指定国内pypi安装包源，存在国外链接不上的问题。
Processing d:\python\pythonlib\matplotlib-3.0.3-cp36-cp36m-win_amd64.whl 为windows环境下安装包，来自https://www.lfd.uci.edu/~gohlke/pythonlibs/

安装结果

Installing collected packages: six, cycler, kiwisolver, numpy, pyparsing, python-dateutil, matplotlib
Successfully installed cycler-0.10.0 kiwisolver-1.2.0 matplotlib-3.0.3 numpy-1.19.0 pyparsing-2.4.7 python-dateutil-2.8.1 six-1.15.0

第二步安装图像处理CV和image
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple opencv-python
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\scikit_image-0.17.2-cp36-cp36m-win_amd64.whl
Installing collected packages: pillow, tifffile, PyWavelets, imageio, networkx, scikit-image
Successfully installed PyWavelets-1.1.1 imageio-2.9.0 networkx-2.4 pillow-7.2.0 scikit-image-0.17.2 tifffile-2020.7.4

2.2 数据分析

第三步，安装numpy
由于tensorflow版本的要求，以及SciPy依赖于numpy+mkl，安装scipy前需要先安装好numpy+mkl，这样需要先卸载已经自动携带安装的numpy。
D:\Python>pip uninstall numpy
Uninstalling numpy-1.19.0:

D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\numpy-1.16.6+mkl-cp36-cp36m-win_amd64.whl

第四步，安装科学计算包SciPy
数学、科学和工程相关功能库，类似Matlab，可用于如傅里叶变换、信号处理、线性代数类、图像处理类、稀疏图压缩类、稀疏运算类、优化算法类等应用
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\scipy-1.0.1-cp36-none-win_amd64.whl

第五步，安装Pandas
Pandas是Python数据分析高层次应用库，提供管理简单易用的数据结构和数据分析工具。

D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pandas
Installing collected packages: pytz, pandas
Successfully installed pandas-1.0.5 pytz-2020.1

2.3 机器学习

第六步，安装sklearn
Scikit-learn项目最早由数据科学家 David Cournapeau 在 2007 年发起，需要NumPy和SciPy等其他包的支持，是Python语言中专门针对机器学习应用而发展起来的一款开源框架。

在Windows环境中，sklearn 需要在安装 numpy+mkl 和scipy 之后才可以安装，安装过程如下。首先，下载Python scikit-learn，Windows版下载网站地址为：https://www.lfd.uci.edu/~gohlke/pythonlibs/

D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\scikit_learn-0.19.1-cp36-cp36m-win_amd64.whl

D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\sklearn_contrib_py_earth-0.1.0-cp36-cp36m-win_amd64.whl

第七步，安装XGBoot
XGBoost是陈天奇等人开发的一个开源机器学习项目，高效地实现了GBDT算法并进行了算法和工程上的许多改进，被广泛应用在Kaggle竞赛及其他许多机器学习竞赛中并取得了不错的成绩。

说到XGBoost，不得不提GBDT(Gradient Boosting Decision Tree)。因为XGBoost本质上还是一个GBDT，但是力争把速度和效率发挥到极致，所以叫X (Extreme) GBoosted。包括前面说过，两者都是boosting方法。

D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple D:\Python\pythonlib\xgboost-0.72-cp36-cp36m-win_amd64.whl

2.4 深度学习

第八步，tensorflow安装CPU 1.13.2版本（需要和Tensorbord配套）
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple tensorflow==1.13.2
Successfully installed absl-py-0.9.0 astor-0.8.1 gast-0.3.3 grpcio-1.30.0 h5py-2.10.0 importlib-metadata-1.7.0 keras-applications-1.0.8 keras-preprocessing-1.1.2 markdown-3.2.2 mock-4.0.2 protobuf-3.12.2 tensorboard-1.13.1 tensorflow-1.13.2 tensorflow-estimator-1.13.0 termcolor-1.1.0 wheel-0.34.2 zipp-3.1.0

第九步，安装开发框架keras
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple keras
Installing collected packages: pyyaml, keras
Successfully installed keras-2.4.3 pyyaml-5.3.1

2.5 Web服务（Web Service）

第十步，安装web服务flask
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple flask
Installing collected packages: Werkzeug, click, itsdangerous, MarkupSafe, Jinja2, flask
Successfully installed Jinja2-2.11.2 MarkupSafe-1.1.1 Werkzeug-1.0.1 click-7.1.2 flask-1.1.2 itsdangerous-1.1.0

2.6 数据库驱动

第十一步，安装mongodb数据库驱动
MongoDB是一个基于分布式文件存储的数据库，由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
D:\Python>pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pymongo