改写spider
是锦鲤本臾了!
这个作者很懒,什么都没留下…
展开
-
爬虫项目笔记(二):scrapy的main
python 没有理解中的main()方法,但是有if name == “main” 这可以看成是python程序的入口 Scrapy默认是不能在IDE中调试的,所以 from scrapy.cmdline import execute execute(['scrapy', 'crawl', 'zf']) 第二行中代码中的前两个参数是不变的,第三个参数是自己的spider的名字。 ...原创 2019-12-06 21:47:39 · 1045 阅读 · 0 评论 -
爬虫项目笔记(一):获取json信息和配置
获取信息 在items.py里对元数据初始化 import scrapy class ZhengfuItem(scrapy.Item): name = scrapy.Field() website = scrapy.Field() url = scrapy.Field() type = scrapy.Field() info = scrapy.Field() subty...原创 2019-12-05 20:12:44 · 218 阅读 · 0 评论