python
FairlyPerson
这个作者很懒,什么都没留下…
展开
-
Python入门记录
脚本入口: if __name__ == '__main__': do_some_things() 语句块的开始和结尾:如:函数、if、else、for、while等执行的语句块的开始和结尾,由代码的缩减来控制。 例:if True = condition: do_thing_one() do_thing_two() 当 condition的取值为‘布尔值Tru原创 2016-08-05 08:46:03 · 527 阅读 · 0 评论 -
Scrapy、ScrapyRedis使用
Scrapy的爬虫添加redis支持的时,会出现的坑: 在Scrapy中request对象在传递时,是引用传递,即在一处修改了request,那么在其他地方也会改变;而换成redis后,这个会变为值传递;原因?request对象是从redis数据库中反序列化过来的; 关于禁用duplacte filter; 在scrapy的原始爬虫中,设置一个变量即可;但在scrapy redis中,需要自己...原创 2019-08-24 08:44:38 · 146 阅读 · 0 评论