爬取58同城二手房数据,将爬取的数据保存在一个csv文件和MongoDB数据库。
代码见:https://github.com/wangjun1996/58tongcheng_spider
(运行项目中 zhihuUser/main.py 即可开始爬虫)
本人爬取的是大连市的二手房数据,若要爬取其他城市数据,修改 tongcheng\spiders\tongcheng_spider.py 中的相应url即可
爬取58同城二手房数据,将爬取的数据保存在一个csv文件和MongoDB数据库。
代码见:https://github.com/wangjun1996/58tongcheng_spider
(运行项目中 zhihuUser/main.py 即可开始爬虫)
本人爬取的是大连市的二手房数据,若要爬取其他城市数据,修改 tongcheng\spiders\tongcheng_spider.py 中的相应url即可