- 博客(4)
- 收藏
- 关注
原创 requests设置代理可以,scrapy设置代理就超时 问题记录
今天被自己坑了一把,我爬下来的免费代理 ip。明明用requests设置proxies,返回就200。用scrapy设置代理就一直报连接超时的问题(不能用的那种)。scrapy的代理设置木有问题(网上一堆教程)如上图,测试之后发现 都是过!!。但是在scrapy中就报错。我之后才发现原来requests的proxies会做判断,根据访问的url的类型来决定用那个代理。因为我url是http...
2019-04-28 18:43:11 4850 2
原创 JWT Token验证Authorization 失败原因记录
项目环境:djangorestframework + apache + mod_wsgi 主要使用token进行身份验证# rest_framework 配置REST_FRAMEWORK = { # JWT Token认证 'DEFAULT_AUTHENTICATION_CLASSES': ( # drf的这一阶段主要是做验证,middleware的auth...
2018-12-21 15:50:05 13554 2
原创 pandas从excel导入数据,写入数据库
用pandas从excel导入数据,到写入数据库, 综合来说其实很简单,只有pandas库中的两个函数:1.read_excel(),2.to_spl()。首先先导入pandas库:import pandas as pd初始化参数: def __init__(self): self.path = os.path.join(settings.BASE_DI...
2018-12-10 20:39:14 7284
原创 ubuntu中,部署到新的虚拟环境中,一次性安装原来项目的依赖包
1. 虚拟环境 1.1 在终端输入命令,查看是否安装了虚拟环境: virtualenv --version 1.2 如果没有安装虚拟环境,输入以下命令安装虚拟环境,如果已经安装了,跳过此步骤: sudo pip install virtualenv sudo...
2018-05-07 20:43:27 995
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人