windows平台写的爬虫在linux中运行产生的错误总结

1.中文乱码

修改linux系统语言

export LANG=zh_CN.UTF-8

python文件头部加上编码

# -*- coding: utf-8 -*-

2.urllib.request报错

使用 python3 download.py 运行

3.正则表达式匹配不到

字符串前加u

reg = u'<li><a href="(.*?)">(第.*?)</a></li>'

4.urlopen打开https链接报错

import ssl

ssl安装:https://blog.csdn.net/qq_38289815/article/details/90675756

5.后台运行方法

nohup python3 download.py &