python 抓取豆瓣电影排行榜top10

豆瓣电影排行版网页地址: http://movie.douban.com/chart

步骤:

1 向目的地发送请求,获取网页源代码;

2 解析网页;

3 获取数据

python version : 2.7.6

########获取网页源代码###########

import   requests
from bs4 import  BeautifulSoup
response = requests.get("http://movie.douban.com/chart") 
html  = response.text
soup = BeautifulSoup(html)

##################################

通过网页源代码我们发现,电影名称出现再a标签下的 title

故有:

########################

for title in soup.find_all('a'):
    name = title.get('title')
    if name != None:
        print  name

###########################

done!

转载于:https://my.oschina.net/u/2376409/blog/514511