![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
qq_28387873
这个作者很懒,什么都没留下…
展开
-
scrapy简单案例:好听轻音乐网
目标:爬取好听轻音乐网热播排行榜的歌曲名称和艺术家信息 1.创建爬虫项目 在你想要创立的文件夹下打开命令窗口,输入 scrapy startproject mspider(mspider是项目名称) 2.打开爬虫项目中的items.py,定义目标数据的字段 代码如下: import scrapy #定义目标数据的字段 class MspiderItem(scrapy.Item): ti...原创 2019-12-06 13:44:44 · 713 阅读 · 0 评论 -
scrapy学习笔记(一):常用命令
scrapy学习笔记(一):常用命令 scrapy主要用于做项目爬虫(爬虫项目下面可能有多个爬虫文件) 全局命令 全局命令在scrapy项目外也可以使用 1.scrapy -h 获取帮助 2.scrapy fetch 爬取网页,不依赖爬虫项目爬取网页,主要用来查看爬取过程 scrapy fetch -h(查看帮助) scrapy fetch http://www.baidu.com --nlog...原创 2019-12-05 23:48:22 · 189 阅读 · 0 评论