目的
写一个真正意义上一个爬虫,并将他爬取到的数据分别保存到txt、json、已经存在的mysql数据库中。
目标分析:
数据的筛选:
我们使用chrome开发者工具,模拟鼠标定位到相对应位置:
可以看到我们需要的数据,全都包裹在
这样我们就已经将准备工作做完了。
看一下当前的目录:
编写items.py:
这次我们来先编写items,十分的简单,只需要将希望获取的字段名填写进去:
目的
写一个真正意义上一个爬虫,并将他爬取到的数据分别保存到txt、json、已经存在的mysql数据库中。
目标分析:
数据的筛选:
我们使用chrome开发者工具,模拟鼠标定位到相对应位置:
可以看到我们需要的数据,全都包裹在
这样我们就已经将准备工作做完了。
看一下当前的目录:
编写items.py:
这次我们来先编写items,十分的简单,只需要将希望获取的字段名填写进去: