爬虫1_2019年豆瓣新片排行榜

from bs4 import BeautifulSoup
import requests
import lxml


def request_douban(url):
    try:
        headers = {'user-agent': 'my-app/0.0.1'}  # 伪装成浏览器,避免403,被禁止访问
        response = requests.get(url, headers=headers)
        if response.status_code == 200:
            return response.text
    except requests.RequestException:
        return None


def main(url):
    html = request_douban(url)
    soup = BeautifulSoup(html, 'lxml')  # 源码
    moives_list = soup.find(class_="").find_all('tr')
    # print(moives_list)
    for item in moives_list:
        # print(item)
        # item_name = item.find(class_='title').string
        try:
            item_name = item.find(class_='nbg').get('title')
            item_img = item.find('a').find('img').get('src')
            item_score = item.find(class_="rating_nums").string
            item_comment = item.find(class_="star clearfix").find(class_="pl").string
            print('电影名:{:<10}评分:{:<5}评价人数:{:<10}封面:{}'.format(item_name, item_score, item_comment, item_img))
            print('-'*50)
        except:
            print('Error')


if __name__ == "__main__":
    url = 'https://movie.douban.com/chart'
    main(url)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值