用python实现给定电影英文名，在猫眼上爬到中文名和票房

一一一一一Python开发

于 2019-10-09 21:59:51 发布

阅读量782

点赞数

文章标签： Python Python爬虫后端编程语言数据挖掘

本文链接：https://blog.csdn.net/mtbcxx007/article/details/102470498

版权

这篇博客主要介绍了如何使用Python进行网络爬虫，针对给定的电影英文名，从猫眼电影网站抓取对应的中文名称以及票房数据。适合对Python爬虫感兴趣的读者，内容涵盖了基础的Python脚本知识，以及数据挖掘在实际应用中的示例。

摘要由CSDN通过智能技术生成

[root@xxn maoyan]# cat cat.py
#!/usr/bin/env python
#coding:utf-8

import requests
from bs4 import BeautifulSoup

def movieurl(url):
    """
    用来获取电影的单页url地址
    """
    headers = {
        "User-Agent":"Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 UBrowser/6.2.3964.2 Safari/537.36",
    }
    response = requests.get(url,headers=headers,timeout=10)
    soup= BeautifulSoup(response.text,'lxml')
    href = soup.find_all('div',class_="channel-detail movie-item-title")[0]
    movieurl = "http://maoyan.com%s" % href.find('a')['href']
    return movieurl

def moveinfo(url):
    """
    得到电影的中文名,票房单位。
    如果票房单位没数据，说明票房"暂无"。
    """
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 UBrowser/6.2.3964.2 Safari/537.36",
    }
    response = requests.get(url, headers=headers,timeout=5)
    soup = BeautifulSoup(response.text, 'lxml')
    Chinesename = soup.find('div',class_="movie-brief-container").h3.string
    try:
        boxofficeunit = soup.find_all('div',class_