简单的代码,爬虫分三步:请求,解析,存储
import requests #导入requests 库
r=requests.get('http://www.wise.xmu.edu.cn/people/faculty') #get网址
html=r.content #得到网址全部内容
print r.status_code,r.encoding #返回状态信息 内容字码形式
from bs4 import BeautifulSoup #利用bs4 进行解析
soup=BeautifulSoup(html,'html.parser')
div_people_list=soup.find('div',attrs={'class':'people_list'})
a_s=div_people_list.find_all('a',attrs={'target':'_blank'})
for a in a_s:
url=a['href']
name=a.get_text()
print name,url #存储,,,,就打印出来吧