自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(2)
  • 收藏
  • 关注

原创 scrapy对大型文件下载出现报错expected response size (6759024687) larger than download max size (1073741824).

出现报错时,说明自己下载的文件已经超过的scrapy框架默认的最大下载尺寸了,这时候我们可以在配置文件setting中添加:`大型文件下载时也会长长造成网络超时, 我们可以延长网络传输的时间,防止数据下载到一半,scrapy终止了该下载流,需要再配置文件在添加:如果对你有帮助请点赞

2024-04-30 17:40:47 99

原创 python实现进程池的回调函数

当第一个任务结束完成后紧接着进行后续处理。

2024-04-01 23:32:29 85

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除