自建python第三方库方法

1 安装框架的目的

利用setup.py将框架安装到python环境中，在编写程序的时候，作为第三方模块来调用

2 框架安装第一步：完成setup.py的编写

以下代码相当于一个模板，只用更改name字段处，改为对应的需要安装的模块名称就可以，比如这里是：scrapy_plus
将setup.py文件放到scrapy_plus的同级目录下

from os.path import dirname, join
# from pip.req import parse_requirements

from setuptools import (
    find_packages,
    setup,
)


def parse_requirements(filename):
    """ load requirements from a pip requirements file """
    lineiter = (line.strip() for line in open(filename))
    return [line for line in lineiter if line and not line.startswith("#")]


with open(join(dirname(__file__), './VERSION.txt'), 'rb') as f:
    version = f.read().decode('ascii').strip()

setup(
    name='scrapy-plus',  # 模块名称
    version=version,
    description='A mini spider framework, like Scrapy',  # 描述
    packages=find_packages(exclude=[]),
    author='itcast',
    author_email='your@email.com',
    license='Apache License v2',
    package_data={'': ['*.*']},
    url='#',
    install_requires=parse_requirements("requirements.txt"),  # 所需的运行环境
    zip_safe=False,
    classifiers=[
        'Programming Language :: Python',
        'Operating System :: Microsoft :: Windows',
        'Operating System :: Unix',
        'Programming Language :: Python :: 2.7',
        'Programming Language :: Python :: 3.4',
        'Programming Language :: Python :: 3.5',
        'Programming Language :: Python :: 3.6',
    ],
)

pip.req可能不存在，对应的可以

def parse_requirements(filename):
    """ load requirements from a pip requirements file """
    lineiter = (line.strip() for line in open(filename))
    return [line for line in lineiter if line and not line.startswith("#")]

注意： 上面代码中可能会报错需要额外安装packaging模块，更新setuptools

pip install packaging
pip install –upgrade setuptools

3 框架安装第二步：完requirements.txt的编写

作用： 写明依赖环境所支持的模块及其版本
使用：在setup.py中使用
创建requirements.txt后放置在setup.py同级目录下

requests>=2.18.4
six>=1.11.0

4 框架安装第三步：完成VERSION.txt的编写

作用：标明当前版本，一个合格的模块，应当具备相应的版本号
使用：在setup.py中使用
创建VERSION.txt后放置在setup.py同级目录下
写入版本号

1.0

5 框架安装第四步：执行安装命令

切换到setup.py所在目录，在终端执行python setup.py install
安装完成后需把python文件包放在python的site-packages目录里面
导入时：import xxx.xxx / from xxx import xxx
注意：该文件包必须是python包！有__init__.py文件，否则安装后不能被正确导入