- 博客(4)
- 资源 (68)
- 问答 (1)
- 收藏
- 关注
原创 pyppeteer 下载 chromium 浏览器报错解决方法 (2020.05.31)
pyppeteer 运行需要 chromium 浏览器,第一次运行时候会自动下 chromium 浏览器,但是由于网络问题,国内下载会报连接错误解决方法:方法1(推荐):下载 chromium 浏览器到本地,百度搜索下载一个即可,然后解压查看 pyppeteer 判断 chromium 浏览器是否需要下载的本地路径,参考下图,先找到虚拟环境下chromium_downloader.py文件,然后代码中添加方框中两句代码,然后运行,就可以打印出本地浏览器路径接着进入路径local-chromiu
2020-05-31 12:24:44 1460
原创 Python 通用爬虫思路
文章目录通用爬虫思路1. 准备URL2. 发送请求,获取响应3. 提取数据4. 保存通用爬虫思路1. 准备URL准备start_urlurl地址规律不明显,总数不确定通过代码查找下一页urlxpath定位不明显,寻找url地址,部分参数可能放在当前的响应中(比如当前页码数和总页码数会在当前响应中)准备url_list页码总数明确url地址规律明显2. 发送请求,获取响应添加随机的User-Agent,反反爬虫添加随机代理的IP,建立ip代理池,反反爬虫在对
2020-05-27 17:11:20 471
原创 HttpResponse 和 JsonResponse 的直观区别以及 response.json()方法
HttpResponse对象Django服务器接收到客户端发送过来的请求后,会将提交上来的这些数据封装成一个HttpRequest对象传给视图函数。那么视图函数在处理完相关的逻辑后,也需要返回一个响应给浏览器。而这个响应,我们必须返回HttpResponseBase或者他的子类的对象。而HttpResponse则是HttpResponseBase用得最多的子类。常用属性:content:返回的内容。status_code:返回的HTTP响应状态码。content_type:返回的数据的MIM
2020-05-26 09:41:02 7452 1
原创 终端启动MYSQL时出现报错:“ERROR 2003 (HY000): Can't connect to MySQL server on 'localhost' (10061)” 解决方法
1. 问题说明一直使用:mysql -u root -p 启动mysql数据库,使用了两年都是正常的,突然一天启动时候报错:“ERROR 2003 (HY000): Can’t connect to MySQL server on ‘localhost’ (10061)”2. 解决方法查询多篇博客,发现是由于mysql文件名被篡改了,mysql服务没有自动启动打开计算机管理服务里面查看:一个服务叫mysql,还有一个叫MySQL80 (80就是版本号8.0),对比属性里面的文件路径一致此时
2020-05-11 22:54:11 691
virtualenv-20.0.5-py2.py3-none-any.whl
2020-02-23
virtualenv-20.0.4-py2.py3-none-any.whl
2020-02-23
virtualenv-20.0.3-py2.py3-none-any.whl
2020-02-23
selenium-3.14.1-py2.py3-none-any.whl
2020-02-23
Scrapy-1.8.0-py2.py3-none-any.whl
2020-02-23
Scrapy-1.7.4-py2.py3-none-any.whl
2020-02-23
Scrapy-1.7.3-py2.py3-none-any.whl
2020-02-23
Scrapy-1.7.2-py2.py3-none-any.whl
2020-02-23
requests-2.23.0-py2.py3-none-any.whl
2020-02-23
requests-2.21.0-py2.py3-none-any.whl
2020-02-23
pytz-2019.2-py2.py3-none-any.whl
2020-02-23
pytz-2019.1-py2.py3-none-any.whl
2020-02-23
pyproj-2.5.0-cp38-cp38-win32.whl
2020-02-23
pyproj-2.5.0-cp38-cp38-win_amd64.whl
2020-02-23
pyproj-2.5.0-cp38-cp38-macosx_10_9_x86_64.whl
2020-02-23
pyproj-2.5.0-cp37-cp37m-win32.whl
2020-02-23
pyproj-2.5.0-cp37-cp37m-win_amd64.whl
2020-02-23
pyproj-2.5.0-cp36-cp36m-win32.whl
2020-02-23
pyproj-2.5.0-cp36-cp36m-win_amd64.whl
2020-02-23
pygame-1.9.6-cp37-cp37m-win32.whl
2020-02-23
pygal-2.3.0-py2.py3-none-any.whl
2020-02-23
plotly-4.5.1-py2.py3-none-any.whl
2020-02-23
plotly-4.5.0rc1-py2.py3-none-any.whl
2020-02-23
pandas-1.0.1-cp38-cp38-win32.whl
2020-02-23
pandas-1.0.1-cp38-cp38-macosx_10_9_x86_64.whl
2020-02-23
pandas-1.0.1-cp37-cp37m-win_amd64.whl
2020-02-23
numpy-1.18.1-cp38-cp38-win32.whl
2020-02-23
numpy-1.18.1-cp38-cp38-macosx_10_9_x86_64.whl
2020-02-23
matplotlib-3.1.3-cp36-cp36m-win_amd64.whl
2020-02-23
matplotlib-3.1.3-cp36-cp36m-win32.whl
2020-02-23
matplotlib-3.1.3-cp37-cp37m-win32.whl
2020-02-23
matplotlib-3.1.3-cp38-cp38-macosx_10_9_x86_64.whl
2020-02-23
matplotlib-3.1.3-cp38-cp38-win32.whl
2020-02-23
greenlet-0.4.15-cp37-cp37m-win_amd64.whl
2020-02-23
greenlet-0.4.15-cp37-cp37m-win32.whl
2020-02-23
greenlet-0.4.15-cp38-cp38-win_amd64.whl
2020-02-23
greenlet-0.4.15-cp38-cp38-win32.whl
2020-02-23
gevent-1.5a3-cp38-cp38-win_amd64.whl
2020-02-23
gevent-1.5a3-cp37-cp37m-win_amd64.whl
2020-02-23
gevent-1.4.0-cp37-cp37m-win_amd64.whl
2020-02-23
TA创建的收藏夹 TA关注的收藏夹
TA关注的人