- 博客(3)
- 收藏
- 关注
原创 一个简单的安居客房屋信息爬虫2(mongodb数据库,多线程)
一个简单的安居客房屋信息爬虫2采用多线程爬虫,爬取的信息放在mongodb数据库中。 from lxml import etree import requests import time import pymongo from multiprocessing import Pool client = pymongo.MongoClient('localhost', 27017) mydb =...
2020-02-26 17:53:56 382
原创 一个简单的安居客房屋信息爬虫
自学python爬虫,独立编写一段爬取房屋信息的爬虫。 思路:利用Lxml库和Xpath语法,把爬取的信息储存在EXCEL表格中。 import xlwt from lxml import etree import requests import time all_info_list = [] headers = { 'User-Agent':'Mozilla/5.0 (Wind...
2020-02-25 22:59:12 2262
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人