HYector
码龄4年
关注
提问 私信
  • 博客:1,033
    1,033
    总访问量
  • 3
    原创
  • 1,746,202
    排名
  • 0
    粉丝
  • 0
    铁粉
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:四川省
  • 加入CSDN时间: 2021-04-15
博客简介:

weixin_57273127的博客

查看详细资料
个人成就
  • 获得1次点赞
  • 内容获得0次评论
  • 获得1次收藏
创作历程
  • 3篇
    2021年
成就勋章
TA的专栏
  • 爬虫工程化
    2篇
  • 计算机基础
  • 浏览器反爬
兴趣领域 设置
  • 网络空间安全
    web安全
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

RAP工程选型

针对reallyinfo.rap采集项目到底用scrapy还是平坦化asyncio?首先,用还是不用是个问题,就我个人来说,无疑更喜欢asyncio,这种紧凑的流程化的编程方式;爬虫本身也不是什么大项目,基于配置的插件接口式编程有点重,尤其是面对复杂的api时,将复杂的中间件与spider逻辑分离不利于往后更新。其次,scrapy利用的twisted做下载器,目前对复杂的twisted研究甚少,面对有些错误或者空跑不知所云。最后,目前社区对asyncio的优秀支持,包括aioredis,aiom
原创
发布博客 2021.05.17 ·
290 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

urllib.request优缺点和cookie及proxy切换

urllib.request优缺点优点将proxy,cookie,重定向等功能做成插件式,并对这些插件排序管理,用于在网络访问时各个功能按次使用集成http、https、ftp等应用层协议默认自动处理 http 300 系列重定向响应采用【connection:close】方式来作为数据接收完成的信号,不再用底层的 http.client 的 【Content-Length】来作为数据接收完成的判断缺点【connection:close】是把双刃剑,每访问一次,就要建立-关闭一次连接,耗
原创
发布博客 2021.05.07 ·
619 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

驾考理论

##道路交通安全####无重大交通事故行为处罚驾照重考期限追逐竞驶,情节恶劣拘役,罚金--扣满12分-扣留重考科目一酒驾-扣留重考科目一毒驾拘役,罚金注销3年醉驾拘役,罚金吊销5年酒驾,血液中酒精含量20mg/100ml以上;醉驾,血液中酒精含量80mg/100ml以上作假撤销,过期注销,违法吊销,吊5注撤3####因为违反道路交通安全法,发生重大交通事故,吊销驾驶证,并终生不得取得驾驶证事故刑期
原创
发布博客 2021.05.07 ·
119 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏