python中response是什么意思_python requests和response

2020年5月21号, 和往常一样,都只是普通的一天,但是今天碰到了一个事情:很多时候我们写完爬虫,都是为了抓取数据给到别人,但是如果这个数据是需要实时更新的,那怎么办? 岂不是自己天天抓取完,再把数据给到他人。这样子其实很麻烦。于是,我就开始着手如何把python项目打包成exe文件。于是我就上了pyinstaller, 按照网上的教程把scrapy工程导出成exe, 但是导出完成之后, 发现在...
摘要由CSDN通过智能技术生成

2020年5月21号, 和往常一样,都只是普通的一天,但是今天碰到了一个事情:很多时候我们写完爬虫,都是为了抓取数据给到别人,但是如果这个数据是需要实时更新的,那怎么办? 岂不是自己天天抓取完,再把数据给到他人。这样子其实很麻烦。于是,我就开始着手如何把python项目打包成exe文件。

于是我就上了pyinstaller, 按照网上的教程把scrapy工程导出成exe, 但是导出完成之后, 发现在我的电脑上运行是OK的,但是其他人的电脑上不行。然后作为小白的自己不知道该何去何从,scrapy是我自己用的最顺手的爬虫工具。可是涉及到的文件确实很多,打包的话也容易出问题。

自己公司电脑正常运行

打包完成之后的部分文件,文件还是比较多的。

打包完成之后的文件

其他人的电脑运行结果:

在个人电脑的运行结果

自己暂时没有想到如何去修改,于是就想着如果不是用scrapy写程序呢?打包的话是不是比较简单。于是自己没有用scrapy,用的是python自带的requests重写了爬虫的代码.

由于自己之前一直用的scrapy, 习惯了那个框架,现在出来之后开始写,还是挺不习惯的。最难的部分是以前自己一直在scrapy中一直用XPATH来解析response中的内容并提取,可以说是非常熟练,现在突然换回来,一下子不知道该如何处理。

于是自己就去网上看了别人的方法,发现其实也是可以用xpath的&

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值