2019-01-18-Python爬取猫眼电影排行榜

最新推荐文章于 2024-05-24 18:42:29 发布
最新推荐文章于 2024-05-24 18:42:29 发布
阅读量2.7k 收藏 3
点赞数 1
分类专栏： Python 文章标签： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Coder_Jeremy/article/details/86546557
版权

title: Python爬取猫眼电影排行榜
date: 2019-01-18 20:44:16
tags:

  • python
  • lxml
  • requests
  • json
    categories: python

Python爬取猫眼电影排行榜

  • requests 获取 html
  • lxml 解析 html
  • xpath 定位元素
  • json 存文件

自己写的

import requests
from lxml import html
import json
# 存储排名的列表
rank_list = []
def spider(offset):
    '''爬取猫眼电影排行榜'''
    url = "https://maoyan.com/board/4?offset={offset}".format(offset=offset)
    html_data = requests.get(url).text
    # print(html_data)
    selector = html.fromstring(html_data)
    # print(selector)

    topper = selector.xpath('//dd')
    # print(topper)
    temp = []
    for movie in topper:
        # 排名
        rank = movie.xpath('i/text()')[0]
        print("排名:{}".format(rank))
        # 电影名
        name = movie.xpath('div/div/div/p/a/@title')[0]
        print("《{}》".format(name))
        # 主演
        star = movie.xpath('div/div/div/p[@class="star"]/text()')[0].strip()
        print(star)
        # 上映时间
        time = movie.xpath('div/div/div/p[@class="releasetime"]/text()')[0]
        print(time)
        # 评分
        score1 = movie.xpath('div/div/div/p[@class="score"]/i[1]/text()')[0]
        print("评分:{}".format(score1), end='')
        score2 = movie.xpath('div/div/div/p[@class="score"]/i[2]/text()')[0]
        print("{}".format(score2))
        # 封面,网站两个<img>标签，两个src资源无法区分，通过pycharm获取html源代码,src标签是不一样的
        image = movie.xpath('a[@class="image-link"]/img/@data-src')[0]
        print(image)
        print("-"*20)

        rank_list.append({
            'rank': rank,
            'name': name,
            'star': star,
            'time': time,
            'score': score1+score2,
            'image': image
        })
        temp.append({
            'rank': rank,
            'name': name,
            'star': star,
            'time': time,
            'score': score1 + score2,
            'image': image
        })
    # print("一共爬取到{}部电影".format(len(rank_list)))
    # for movie in rank_list:
    #     print(movie)
    return temp


# 爬一次写一次，爬一页写一次，爬完写一次
def write_to_file(content):
    '''写入文件'''
    with open('Maoyan_Rank.txt', 'a', encoding='utf-8') as f:
        print(type(json.dumps(content)))
        f.write(json.dumps(content, ensure_ascii=False)+'\n')

if __name__ == '__main__':
    #spider()
    for i in range(0, 100, 10):
        for item in spider(i):
            write_to_file(item)

     # print("一共爬取到{}部电影".format(len(rank_list)))
     # for movie in rank_list:
     #    print(movie)

     # f = open('Maoyan_Rank.txt', 'w')
     # f.write(item for item in rank_list)

书上用的正则表达式，这里跳过

import requests
from lxml import html
import json

def get_one_page(url):
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) '
                      'AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36'
    }
    res = requests.get(url, headers=headers)
    # print(res)
    # get 请求 成功返回 状态码 = 200
    if res.status_code == 200:
        # print(res.text)
        return res.text
    return None

def spider(offset):
    '''爬取猫眼电影排行榜'''
    url = "https://maoyan.com/board/4?offset={}".format(offset)
    html_data = get_one_page(url)
    # print(html_data)
    selector = html.fromstring(html_data)
    # print(selector)

    topper = selector.xpath('//dd')
    # print(topper)

    rank_list = []
    for movie in topper:
        # 排名
        rank = movie.xpath('i/text()')[0]
        print("排名:{}".format(rank))
        # 电影名
        name = movie.xpath('div/div/div/p/a/@title')[0]
        print("《{}》".format(name))
        # 主演
        star = movie.xpath('div/div/div/p[@class="star"]/text()')[0].strip()
        print(star)
        # 上映时间
        time = movie.xpath('div/div/div/p[@class="releasetime"]/text()')[0]
        print(time)
        # 评分
        score1 = movie.xpath('div/div/div/p[@class="score"]/i[1]/text()')[0]
        print("评分:{}".format(score1), end='')
        score2 = movie.xpath('div/div/div/p[@class="score"]/i[2]/text()')[0]
        print("{}".format(score2))
        # 封面,网站两个<img>标签，两个src资源无法区分，通过pycharm获取html源代码,src标签是不一样的
        image = movie.xpath('a[@class="image-link"]/img/@data-src')[0]
        print(image)
        print("-"*20)

        rank_list.append({
            'rank': rank,
            'name': name,
            'star': star,
            'time': time,
            'score': score1+score2,
            'image': image
        })
    # print("一共爬取到{}部电影".format(len(rank_list)))
    # for movie in rank_list:
    #     print(movie)
    return rank_list

def write_to_file(content):
    '''写入文件'''
    with open('result.txt', 'a', encoding='utf-8') as f:
        print(type(json.dumps(content)))
        f.write(json.dumps(content, ensure_ascii=False)+'\n\n')

if __name__ == '__main__':
    #spider()
    for i in range(0, 100, 10):
        for item in spider(i):
            write_to_file(item)

爬取结果

输出结果

C:\ProgramData\Anaconda3\python.exe F:/Python+/Spider/Maoyan.py
排名:1
《霸王别姬》
主演：张国荣,张丰毅,巩俐
上映时间：1993-01-01
评分:9.6
https://p1.meituan.net/movie/20803f59291c47e1e116c11963ce019e68711.jpg@160w_220h_1e_1c
--------------------
排名:2
《肖申克的救赎》
主演：蒂姆·罗宾斯,摩根·弗里曼,鲍勃·冈顿
上映时间：1994-10-14(美国)
评分:9.5
https://p0.meituan.net/movie/283292171619cdfd5b240c8fd093f1eb255670.jpg@160w_220h_1e_1c
--------------------
排名:3
《罗马假日》
主演：格利高里·派克,奥黛丽·赫本,埃迪·艾伯特
上映时间：1953-09-02(美国)
评分:9.1
https://p0.meituan.net/movie/54617769d96807e4d81804284ffe2a27239007.jpg@160w_220h_1e_1c
--------------------
排名:4
《这个杀手不太冷》
主演：让·雷诺,加里·奥德曼,娜塔莉·波特曼
上映时间：1994-09-14(法国)
评分:9.5
https://p0.meituan.net/movie/e55ec5d18ccc83ba7db68caae54f165f95924.jpg@160w_220h_1e_1c
--------------------
排名:5
《教父》
主演：马龙·白兰度,阿尔·帕西诺,詹姆斯·肯恩
上映时间：1972-03-24(美国)
评分:9.3
https://p1.meituan.net/movie/f5a924f362f050881f2b8f82e852747c118515.jpg@160w_220h_1e_1c
--------------------
排名:6
《泰坦尼克号》
主演：莱昂纳多·迪卡普里奥,凯特·温丝莱特,比利·赞恩
上映时间：1998-04-03
评分:9.5
https://p1.meituan.net/movie/0699ac97c82cf01638aa5023562d6134351277.jpg@160w_220h_1e_1c
--------------------
排名:7
《唐伯虎点秋香》
主演：周星驰,巩俐,郑佩佩
上映时间：1993-07-01(中国香港)
评分:9.2
https://p0.meituan.net/movie/da64660f82b98cdc1b8a3804e69609e041108.jpg@160w_220h_1e_1c
--------------------
排名:8
《千与千寻》
主演：柊瑠美,入野自由,夏木真理
上映时间：2001-07-20(日本)
评分:9.3
https://p0.meituan.net/movie/b076ce63e9860ecf1ee9839badee5228329384.jpg@160w_220h_1e_1c
--------------------
排名:9
《魂断蓝桥》
主演：费雯·丽,罗伯特·泰勒,露塞尔·沃特森
上映时间：1940-05-17(美国)
评分:9.2
https://p0.meituan.net/movie/46c29a8b8d8424bdda7715e6fd779c66235684.jpg@160w_220h_1e_1c
--------------------
排名:10
《乱世佳人》
主演：费雯·丽,克拉克·盖博,奥利维娅·德哈维兰
上映时间：1939-12-15(美国)
评分:9.1
https://p0.meituan.net/movie/230e71d398e0c54730d58dc4bb6e4cca51662.jpg@160w_220h_1e_1c
--------------------
排名:11
《天空之城》
主演：寺田农,鹫尾真知子,龟山助清
上映时间：1992
评分:9.1
https://p1.meituan.net/movie/ba1ed511668402605ed369350ab779d6319397.jpg@160w_220h_1e_1c
--------------------
排名:12
《喜剧之王》
主演：周星驰,莫文蔚,张柏芝
上映时间：1999-02-13(中国香港)
评分:9.2
https://p1.meituan.net/movie/18e3191039d5e71562477659301f04aa61905.jpg@160w_220h_1e_1c
--------------------
排名:13
《辛德勒的名单》
主演：连姆·尼森,拉尔夫·费因斯,本·金斯利
上映时间：1993-12-15(美国)
评分:9.2
https://p1.meituan.net/movie/39ed7a0941a3604bba78d299b11a18ce119679.jpg@160w_220h_1e_1c
--------------------
排名:14
《大闹天宫》
主演：邱岳峰,毕克,富润生
上映时间：1965-12-31
评分:9.0
https://p1.meituan.net/movie/14a7b337e8063e3ce05a5993ed80176b74208.jpg@160w_220h_1e_1c
--------------------
排名:15
《音乐之声》
主演：朱莉·安德鲁斯,克里斯托弗·普卢默,埃琳诺·帕克
上映时间：1965-03-02(美国)
评分:9.0
https://p1.meituan.net/movie/6bc004d57358ee6875faa5e9a1239140128550.jpg@160w_220h_1e_1c
--------------------
排名:16
《剪刀手爱德华》
主演：约翰尼·德普,薇诺娜·瑞德,黛安·韦斯特
上映时间：1990-12-06(美国)
评分:8.8
https://p1.meituan.net/movie/0e91ffcfa7e53449216cc29ee8af513a75791.jpg@160w_220h_1e_1c
--------------------
排名:17
《春光乍泄》
主演：张国荣,梁朝伟,张震
上映时间：1997-05-30(中国香港)
评分:9.2
https://p0.meituan.net/movie/ae7245920d95c03765fe1615f3a1fe3865785.jpg@160w_220h_1e_1c
--------------------
排名:18
《美丽人生》
主演：罗伯托·贝尼尼,尼可莱塔·布拉斯基,乔治·坎塔里尼
上映时间：1997-12-20(意大利)
评分:9.3
https://p0.meituan.net/movie/43d259ecbcd53e8bbe902632772281d6327525.jpg@160w_220h_1e_1c
--------------------
排名:19
《海上钢琴师》
主演：蒂姆·罗斯,普路特·泰勒·文斯,比尔·努恩
上映时间：1998-10-28(意大利)
评分:9.2
https://p1.meituan.net/movie/c15b7623cce2f51c75562a3baefe507b68290.jpg@160w_220h_1e_1c
--------------------
排名:20
《黑客帝国》
主演：基努·里维斯,凯瑞-安·莫斯,劳伦斯·菲什伯恩
上映时间：2000-01-14
评分:9.0
https://p1.meituan.net/movie/d981a12f59d3cc92ff666094404ad8f0211220.jpg@160w_220h_1e_1c
--------------------
排名:21
《加勒比海盗》
主演：约翰尼·德普,凯拉·奈特莉,奥兰多·布鲁姆
上映时间：2003-11-21
评分:8.9
https://p1.meituan.net/movie/b449893ebc63d5c54eb4a5b60341f334383831.jpg@160w_220h_1e_1c
--------------------
排名:22
《指环王3：王者无敌》
主演：伊莱贾·伍德,伊恩·麦克莱恩,丽芙·泰勒
上映时间：2004-03-15
评分:9.2
https://p0.meituan.net/movie/932bdfbef5be3543e6b136246aeb99b8123736.jpg@160w_220h_1e_1c
--------------------
排名:23
《哈利·波特与魔法石》
主演：丹尼尔·雷德克里夫,鲁伯特·格林特,艾玛·沃特森
上映时间：2002-01-26
评分:9.1
https://p1.meituan.net/movie/aacb9ed2a6601bfe515ef0970add1715623792.jpg@160w_220h_1e_1c
--------------------
排名:24
《无间道》
主演：刘德华,梁朝伟,黄秋生
上映时间：2003-09-05
评分:9.1
https://p1.meituan.net/movie/0d93b5b585ce29c6688e43f3989fb41f86421.jpg@160w_220h_1e_1c
--------------------
排名:25
《射雕英雄传之东成西就》
主演：张国荣,梁朝伟,张学友
上映时间：1993-02-05(中国香港)
评分:8.9
https://p1.meituan.net/movie/53b6f0b66882a53b08896c92076515a8236400.jpg@160w_220h_1e_1c
--------------------
排名:26
《楚门的世界》
主演：金·凯瑞,劳拉·琳妮,诺亚·艾默里奇
上映时间：1998-06-01(美国)
评分:8.9
https://p0.meituan.net/movie/8959888ee0c399b0fe53a714bc8a5a17460048.jpg@160w_220h_1e_1c
--------------------
排名:27
《蝙蝠侠：黑暗骑士》
主演：克里斯蒂安·贝尔,希斯·莱杰,阿伦·伊克哈特
上映时间：2008-07-18(美国)
评分:9.3
https://p0.meituan.net/movie/d12a1c198ad9ffac72b5db57feacb449294699.jpg@160w_220h_1e_1c
--------------------
排名:28
《教父2》
主演：阿尔·帕西诺,罗伯特·德尼罗,黛安·基顿
上映时间：1974-12-12(美国)
评分:9.0
https://p1.meituan.net/movie/7bac8bfa6739c18620065132ce9c64fa85110.jpg@160w_220h_1e_1c
--------------------
排名:29
《指环王2：双塔奇兵》
主演：伊莱贾·伍德,伊恩·麦克莱恩,丽芙·泰勒
上映时间：2003-04-25
评分:9.1
https://p0.meituan.net/movie/5cfa597a98b35ee4ee598695942641ba287922.jpg@160w_220h_1e_1c
--------------------
排名:30
《机器人总动员》
主演：本·贝尔特,艾丽莎·奈特,杰夫·格尔林
上映时间：2008-06-27(美国)
评分:9.3
https://p1.meituan.net/movie/4592eef6b6dffcd1d950f55f41ab098f239816.jpg@160w_220h_1e_1c
--------------------
排名:31
《天堂电影院》
主演：菲利浦·诺瓦雷,赛尔乔·卡斯特利托,蒂兹亚娜·罗达托
上映时间：1988-11-17(意大利)
评分:9.2
https://p1.meituan.net/movie/618e57ddb3173de6bbf2e278946b11f279679.jpg@160w_220h_1e_1c
--------------------
排名:32
《活着》
主演：葛优,巩俐,牛犇
上映时间：1994-05-18(法国)
评分:9.0
https://p0.meituan.net/movie/4c41068ef7608c1d4fbfbe6016e589f7204391.jpg@160w_220h_1e_1c
--------------------
排名:33
《拯救大兵瑞恩》
主演：汤姆·汉克斯,马特·达蒙,汤姆·塞兹摩尔
上映时间：1998-07-24(美国)
评分:8.9
https://p1.meituan.net/movie/779bcc212a50a2526343362778f6b63c334618.jpg@160w_220h_1e_1c
--------------------
排名:34
《哈尔的移动城堡》
主演：倍赏千惠子,木村拓哉,美轮明宏
上映时间：2004-11-20(日本)
评分:9.0
https://p0.meituan.net/movie/0127b451d5b8f0679c6f81c8ed414bb2432442.jpg@160w_220h_1e_1c
--------------------
排名:35
《阿凡达》
主演：萨姆·沃辛顿,佐伊·索尔达娜,米歇尔·罗德里格兹
上映时间：2010-01-04
评分:9.1
https://p1.meituan.net/movie/91f575ec93f019f428d1f33e3ceca7c5115495.jpg@160w_220h_1e_1c
--------------------
排名:36
《盗梦空间》
主演：莱昂纳多·迪卡普里奥,渡边谦,约瑟夫·高登-莱维特
上映时间：2010-09-01
评分:9.2
https://p1.meituan.net/movie/2f344a9f9575edbcae9f0abe0578bc90339773.jpg@160w_220h_1e_1c
--------------------
排名:37
《忠犬八公的故事》
主演：Forest,理查·基尔,琼·艾伦
上映时间：2010-03-12(英国)
评分:9.3
https://p0.meituan.net/movie/7787c10ad5e95b03cf83ef9473500d8e282796.jpg@160w_220h_1e_1c
--------------------
排名:38
《幽灵公主》
主演：松田洋治,石田百合子,田中裕子
上映时间：1997-07-12(日本)
评分:8.9
https://p0.meituan.net/movie/6ab1882a217e848acceb240365043d53329196.jpg@160w_220h_1e_1c
--------------------
排名:39
《搏击俱乐部》
主演：爱德华·哈里森·诺顿,布拉德·皮特,海伦娜·伯翰·卡特
上映时间：1999-10-15(美国)
评分:8.8
https://p1.meituan.net/movie/c5e76795bf7a78b12a2ffabb4a0c5c11112921.jpg@160w_220h_1e_1c
--------------------
排名:40
《东邪西毒》
主演：张国荣,梁朝伟,刘嘉玲
上映时间：1994-09-17
评分:8.8
https://p1.meituan.net/movie/7e471a9171a410ebc9413b2f1de67afc130067.jpg@160w_220h_1e_1c
--------------------
排名:41
《风之谷》
主演：岛本须美,永井一郎,坂本千夏
上映时间：1992
评分:8.9
https://p0.meituan.net/movie/4f9638ba234c3fb673f23a09968db875371576.jpg@160w_220h_1e_1c
--------------------
排名:42
《疯狂原始人》
主演：尼古拉斯·凯奇,艾玛·斯通,瑞安·雷诺兹
上映时间：2013-04-20
评分:9.5
https://p1.meituan.net/movie/d5e5e53ef9bbd98223e83df261b51b84103223.jpg@160w_220h_1e_1c
--------------------
排名:43
《当幸福来敲门》
主演：威尔·史密斯,贾登·史密斯,坦迪·牛顿
上映时间：2008-01-17
评分:8.9
https://p1.meituan.net/movie/5896de3c1474277730e321c9b1db04a9205644.jpg@160w_220h_1e_1c
--------------------
排名:44
《V字仇杀队》
主演：娜塔莉·波特曼,雨果·维文,斯蒂芬·瑞
上映时间：2006-03-17(美国)
评分:8.8
https://p1.meituan.net/movie/4a4c84aa103ab47202f1aa907c5542a4128882.jpg@160w_220h_1e_1c
--------------------
排名:45
《十二怒汉》
主演：亨利·方达,李·科布,马丁·鲍尔萨姆
上映时间：1957-04-13(美国)
评分:9.1
https://p0.meituan.net/movie/df15efd261060d3094a73ef679888d4f238149.jpg@160w_220h_1e_1c
--------------------
排名:46
《放牛班的春天》
主演：热拉尔·朱尼奥,让-巴蒂斯特·莫尼耶,玛丽·布奈尔
上映时间：2004-10-16
评分:8.8
https://p0.meituan.net/movie/7cd18fcf0b4f9180500124711e81492994030.jpg@160w_220h_1e_1c
--------------------
排名:47
《三傻大闹宝莱坞》
主演：阿米尔·汗,黄渤,卡琳娜·卡普
上映时间：2011-12-08
评分:9.1
https://p0.meituan.net/movie/4bb144bc0a674ba6908349018fd092e6330929.jpg@160w_220h_1e_1c
--------------------
排名:48
《勇敢的心》
主演：梅尔·吉布森,苏菲·玛索,帕特里克·麦高汉
上映时间：1995-05-24(美国)
评分:8.8
https://p1.meituan.net/movie/f8e9d5a90224746d15dfdbd53d4fae3d209420.jpg@160w_220h_1e_1c
--------------------
排名:49
《黑客帝国3：矩阵革命》
主演：基努·里维斯,雨果·维文,凯瑞-安·莫斯
上映时间：2003-11-05
评分:8.8
https://p1.meituan.net/movie/5ca6ffcbb994a51cd6215e7c4fff2d9b71039.jpg@160w_220h_1e_1c
--------------------
排名:50
《速度与激情5》
主演：范·迪塞尔,保罗·沃克,道恩·强森
上映时间：2011-05-12
评分:9.2
https://p1.meituan.net/movie/1d0fa86bcf7a44484b9c16ac6af5be68191952.jpg@160w_220h_1e_1c
--------------------
排名:51
《驯龙高手》
主演：杰伊·巴鲁切尔,杰拉德·巴特勒,亚美莉卡·费雷拉
上映时间：2010-05-14
评分:9.0
https://p1.meituan.net/movie/8194ae885ed9419aadf35c196af86ba4239039.jpg@160w_220h_1e_1c
--------------------
排名:52
《少年派的奇幻漂流》
主演：苏拉·沙玛,伊尔凡·可汗,塔布
上映时间：2012-11-22
评分:9.1
https://p0.meituan.net/movie/34998e31c6d07475f1add6b8b16fd21d192579.jpg@160w_220h_1e_1c
--------------------
排名:53
《神偷奶爸》
主演：史蒂夫·卡瑞尔,杰森·席格尔,拉塞尔·布兰德
上映时间：2010-07-09(美国)
评分:9.0
https://p0.meituan.net/movie/85c2bfba6025bfbfb53291ae5924c215308805.jpg@160w_220h_1e_1c
--------------------
排名:54
《闻香识女人》
主演：阿尔·帕西诺,克里斯·奥唐纳,加布里埃尔·安瓦尔
上映时间：1992-12-23(美国)
评分:8.8
https://p0.meituan.net/movie/7cb7965469cb7ff95613714389f1ea3d87743.jpg@160w_220h_1e_1c
--------------------
排名:55
《断背山》
主演：希斯·莱杰,杰克·吉伦哈尔,米歇尔·威廉姆斯
上映时间：2006-01-13(美国)
评分:9.0
https://p0.meituan.net/movie/e71affe126eeb4f8bfcc738cbddeebc8288766.jpg@160w_220h_1e_1c
--------------------
排名:56
《飞屋环游记》
主演：爱德华·阿斯纳,乔丹·长井,鲍勃·彼德森
上映时间：2009-08-04
评分:8.9
https://p0.meituan.net/movie/47dd790e19dad72b50580641de5608c5199014.jpg@160w_220h_1e_1c
--------------------
排名:57
《大话西游之月光宝盒》
主演：周星驰,莫文蔚,吴孟达
上映时间：2014-10-24
评分:9.6
https://p0.meituan.net/movie/92eb862c42c49f8e41e459c369c4512b226610.jpg@160w_220h_1e_1c
--------------------
排名:58
《飞越疯人院》
主演：杰克·尼科尔森,路易丝·弗莱彻,威尔·萨姆森
上映时间：1975-11-19(美国)
评分:8.8
https://p1.meituan.net/movie/4dddd98730274c3b1464ff0a0ad195e5233381.jpg@160w_220h_1e_1c
--------------------
排名:59
《怦然心动》
主演：玛德琳·卡罗尔,卡兰·麦克奥利菲,艾丹·奎因
上映时间：2010-08-06(美国)
评分:8.9
https://p0.meituan.net/movie/457a35fda360cb72090fa6dcbd1db3c1275333.jpg@160w_220h_1e_1c
--------------------
排名:60
《美国往事》
主演：罗伯特·德尼罗,詹姆斯·伍兹,伊丽莎白·麦戈文
上映时间：1984-02-17(美国)
评分:9.1
https://p1.meituan.net/movie/92198a6fc8c3f5d13aa1bdf203572c0f99438.jpg@160w_220h_1e_1c
--------------------
排名:61
《致命魔术》
主演：休·杰克曼,克里斯蒂安·贝尔,迈克尔·凯恩
上映时间：2006-10-20(美国)
评分:8.8
https://p1.meituan.net/movie/75c0d3eb584be030a01f2e26741a8f41251454.jpg@160w_220h_1e_1c
--------------------
排名:62
《鬼子来了》
主演：姜文,姜宏波,陈强
上映时间：2000-05-12(法国戛纳)
评分:8.9
https://p1.meituan.net/movie/0b507aa44c4dfbbcc91949b69b1b39a168922.jpg@160w_220h_1e_1c
--------------------
排名:63
《无敌破坏王》
主演：约翰·C·赖利,萨拉·西尔弗曼,简·林奇
上映时间：2012-11-06
评分:9.1
https://p0.meituan.net/movie/fcc17667b8343131101eeb4c67d90bf9150883.jpg@160w_220h_1e_1c
--------------------
排名:64
《美丽心灵》
主演：罗素·克洛,詹妮弗·康纳利,艾德·哈里斯
上映时间：2001-12-21(美国)
评分:8.8
https://p0.meituan.net/movie/7b7d1f8aa36d7a15463ce6942708a1a7265296.jpg@160w_220h_1e_1c
--------------------
排名:65
《蝙蝠侠：黑暗骑士崛起》
主演：克里斯蒂安·贝尔,迈克尔·凯恩,加里·奥德曼
上映时间：2012-08-27
评分:8.9
https://p1.meituan.net/movie/96bb58f3e9d213fb0438987d16d27561379209.jpg@160w_220h_1e_1c
--------------------
排名:66
《夜访吸血鬼》
主演：汤姆·克鲁斯,布拉德·皮特,克尔斯滕·邓斯特
上映时间：1994-11-11(美国)
评分:8.8
https://p0.meituan.net/movie/7ec873ba943f13e3c63789d899bd0e23256871.jpg@160w_220h_1e_1c
--------------------
排名:67
《倩女幽魂》
主演：张国荣,王祖贤,午马
上映时间：2011-04-30
评分:9.2
https://p1.meituan.net/movie/6d0510f326bf145dcf49a901fb949b77278838.jpg@160w_220h_1e_1c
--------------------
排名:68
《哈利·波特与死亡圣器（下）》
主演：丹尼尔·雷德克里夫,鲁伯特·格林特,艾玛·沃特森
上映时间：2011-08-04
评分:9.0
https://p1.meituan.net/movie/68fa7db99e958c47d7aa07d015845a6f335154.jpg@160w_220h_1e_1c
--------------------
排名:69
《本杰明·巴顿奇事》
主演：布拉德·皮特,凯特·布兰切特,塔拉吉·P·汉森
上映时间：2008-12-25(美国)
评分:8.8
https://p0.meituan.net/movie/2526f77c650bf7cf3d5ee2dccdeac332244951.jpg@160w_220h_1e_1c
--------------------
排名:70
《钢琴家》
主演：艾德里安·布洛迪,艾米莉娅·福克斯,米哈乌·热布罗夫斯基
上映时间：2002-09-25(法国)
评分:8.8
https://p1.meituan.net/movie/484171372de45945e8bbbcc97db57e09136701.jpg@160w_220h_1e_1c
--------------------
排名:71
《触不可及》
主演：弗朗索瓦·克鲁塞,奥玛·希,安娜·勒尼
上映时间：2011-11-02(法国)
评分:9.1
https://p0.meituan.net/movie/7874ba1378033b0b491df0cc56c43d25221208.jpg@160w_220h_1e_1c
--------------------
排名:72
《熔炉》
主演：孔刘,郑有美,金智英
上映时间：2011-09-22(韩国)
评分:8.8
https://p1.meituan.net/movie/4ad513be2e9419ec7d7d63ba8cc2b6cc134065.jpg@160w_220h_1e_1c
--------------------
排名:73
《初恋这件小事》
主演：马里奥·毛瑞尔,平采娜·乐维瑟派布恩,阿查拉那·阿瑞亚卫考
上映时间：2012-06-05
评分:8.8
https://p1.meituan.net/movie/7ed07b8ea8c0e0d0c7b685d20e3ec64e232004.jpg@160w_220h_1e_1c
--------------------
排名:74
《大话西游之大圣娶亲》
主演：周星驰,朱茵,莫文蔚
上映时间：2014-10-24
评分:8.8
https://p1.meituan.net/movie/dc2246233a6f5ac1e34c7176b602c8ca174557.jpg@160w_220h_1e_1c
--------------------
排名:75
《新龙门客栈》
主演：张曼玉,梁家辉,甄子丹
上映时间：2012-02-24
评分:8.8
https://p0.meituan.net/movie/9e9f12cfc1f54c973dda6c85bd3a139d334520.jpg@160w_220h_1e_1c
--------------------
排名:76
《甜蜜蜜》
主演：黎明,张曼玉,曾志伟
上映时间：2015-02-13
评分:9.2
https://p1.meituan.net/movie/8ad5a0f521fb15637dfdf9cab38d414453783.jpg@160w_220h_1e_1c
--------------------
排名:77
《小鞋子》
主演：默罕默德·阿米尔·纳吉,Kamal Mirkarimi,Behzad Rafi
上映时间：1999-01-22(美国)
评分:9.1
https://p1.meituan.net/movie/bc7b6ababa54e11577d45c05e84a33af54072.jpg@160w_220h_1e_1c
--------------------
排名:78
《素媛》
主演：李来,薛耿求,严志媛
上映时间：2013-10-02(韩国)
评分:9.1
https://p0.meituan.net/movie/4cc4c55c29b77b090485ce9943bf6f87274708.jpg@160w_220h_1e_1c
--------------------
排名:79
《萤火之森》
主演：内山昂辉,佐仓绫音,后藤弘树
上映时间：2011-09-17(日本)
评分:9.0
https://p0.meituan.net/movie/5420be40e3b755ffe04779b9b199e935256906.jpg@160w_220h_1e_1c
--------------------
排名:80
《时空恋旅人》
主演：瑞秋·麦克亚当斯,多姆纳尔·格里森,比尔·奈伊
上映时间：2013-09-04(英国)
评分:8.9
https://p0.meituan.net/movie/4abc8c932cfacfc0089e2883765d02d1295222.jpg@160w_220h_1e_1c
--------------------
排名:81
《穿条纹睡衣的男孩》
主演：阿沙·巴特菲尔德,维拉·法梅加,大卫·休里斯
上映时间：2008-09-12(英国)
评分:9.0
https://p1.meituan.net/movie/a0e0426a4390f5ecb49d25770a184dc0150779.jpg@160w_220h_1e_1c
--------------------
排名:82
《窃听风暴》
主演：乌尔里希·穆埃,塞巴斯蒂安·科赫,马蒂娜·格德克
上映时间：2006-03-23(德国)
评分:9.0
https://p0.meituan.net/movie/3985eaf3858bea0f2a3d966bf7ee2103178217.jpg@160w_220h_1e_1c
--------------------
排名:83
《借东西的小人阿莉埃蒂》
主演：志田未来,神木隆之介,大竹忍
上映时间：2010-07-17(日本)
评分:8.8
https://p0.meituan.net/movie/ce262f261f69fc3d679020402336a4af270365.jpg@160w_220h_1e_1c
--------------------
排名:84
《恐怖直播》
主演：河正宇,李璟荣,李大为
上映时间：2013-07-31(韩国)
评分:8.8
https://p0.meituan.net/movie/b5ff0216e689b3fcc065590c48cd5105255305.jpg@160w_220h_1e_1c
--------------------
排名:85
《7号房的礼物》
主演：柳承龙,郑镇荣,朴信惠
上映时间：2013-01-23(韩国)
评分:8.9
https://p1.meituan.net/movie/6a6e74b2c289f9fa4433dd2dc04a7741331638.jpg@160w_220h_1e_1c
--------------------
排名:86
《海豚湾》
主演：里克·奥巴瑞,路易·西霍尤斯,哈迪·琼斯
上映时间：2009-07-31(美国)
评分:8.9
https://p0.meituan.net/movie/7373dbba07b50ce6f24336edb96b2ea4271536.jpg@160w_220h_1e_1c
--------------------
排名:87
《忠犬八公物语》
主演：仲代达矢,春川真澄,井川比佐志
上映时间：1987-08-01(日本)
评分:9.0
https://p1.meituan.net/movie/c835b3588d0061ed3b992388a0a96f15160913.jpg@160w_220h_1e_1c
--------------------
排名:88
《上帝之城》
主演：亚历桑德雷·罗德里格斯,艾莉丝·布拉加,莱安德鲁·菲尔米诺
上映时间：2002-08-30(巴西)
评分:8.9
https://p1.meituan.net/movie/b553d13f30100db731ab6cf45668e52d94703.jpg@160w_220h_1e_1c
--------------------
排名:89
《辩护人》
主演：宋康昊,郭度沅,吴达洙
上映时间：2013-12-18(韩国)
评分:8.8
https://p0.meituan.net/movie/8fabf3894b7d12d3d2f6e66404813670265761.jpg@160w_220h_1e_1c
--------------------
排名:90
《七武士》
主演：三船敏郎,志村乔,千秋实
上映时间：1954-04-26(日本)
评分:9.1
https://p1.meituan.net/movie/73349facab53529ab9e079c6c8c7c059281729.jpg@160w_220h_1e_1c
--------------------
排名:91
《英雄本色》
主演：狄龙,张国荣,周润发
上映时间：2017-11-17
评分:9.2
https://p0.meituan.net/movie/3e5f5f3aa4b7e5576521e26c2c7c894d253975.jpg@160w_220h_1e_1c
--------------------
排名:92
《一一》
主演：吴念真,金燕玲,李凯莉
上映时间：2000-09-20(法国)
评分:8.9
https://p1.meituan.net/movie/2c0a5fedf4b43d142121b91c6ccabe1b59051.jpg@160w_220h_1e_1c
--------------------
排名:93
《完美的世界》
主演：凯文·科斯特纳,克林特·伊斯特伍德,T·J·劳瑟
上映时间：1993-11-24(美国)
评分:8.9
https://p1.meituan.net/movie/30310858fdab34c7a17cfd7ec8ad8bfc112201.jpg@160w_220h_1e_1c
--------------------
排名:94
《海洋》
主演：雅克·贝汉,姜文,兰斯洛特·佩林
上映时间：2011-08-12
评分:9.0
https://p0.meituan.net/movie/0018b57299d0d4540330a31244c880a9112971.jpg@160w_220h_1e_1c
--------------------
排名:95
《爱·回家》
主演：俞承豪,金艺芬,童孝熙
上映时间：2002-04-05(韩国)
评分:9.0
https://p1.meituan.net/movie/36a893c53a13f9bb934071b86ae3b5c492427.jpg@160w_220h_1e_1c
--------------------
排名:96
《黄金三镖客》
主演：克林特·伊斯特伍德,李·范·克里夫,埃里·瓦拉赫
上映时间：1966-12-23(意大利)
评分:8.9
https://p1.meituan.net/movie/9bff56ed3ea38bb1825daa1d354bc92352781.jpg@160w_220h_1e_1c
--------------------
排名:97
《我爱你》
主演：宋在浩,李顺才,尹秀晶
上映时间：2011-02-17(韩国)
评分:9.0
https://p1.meituan.net/movie/ed50b58bf636d207c56989872a91f4cf305138.jpg@160w_220h_1e_1c
--------------------
排名:98
《迁徙的鸟》
主演：雅克·贝汉,Philippe Labro
上映时间：2001-12-12(法国)
评分:9.1
https://p1.meituan.net/movie/a1634f4e49c8517ae0a3e4adcac6b0dc43994.jpg@160w_220h_1e_1c
--------------------
排名:99
《阿飞正传》
主演：张国荣,张曼玉,刘德华
上映时间：2018-06-25
评分:8.8
https://p0.meituan.net/movie/885fc379c614a2b4175587b95ac98eb95045650.jpg@160w_220h_1e_1c
--------------------
排名:100
《龙猫》
主演：帕特·卡洛尔,蒂姆·达利,丽娅·萨隆加
上映时间：2018-12-14
评分:9.2
https://p0.meituan.net/movie/c304c687e287c7c2f9e22cf78257872d277201.jpg@160w_220h_1e_1c
--------------------

Process finished with exit code 0

保存到txt文件

在这里插入图片描述

Coder_Jeremy Wu
关注
专栏目录
Python教程；一起爬取娱乐圈的排行榜数据
Python免费教程
09-26 690
想关注你的爱豆最近在娱乐圈发展的怎么样吗？本文和你一起爬取娱乐圈的排行榜数据，来看看你的爱豆现在排名变化情况，有几次登顶，几次进了前十名呀。 一、网站原始信息 我们先来看下原始的网站页面 如果我们想一个一个复制这些数据，再进行分析，估计要花一天的时间，才可以把明星的各期排行数据处理好。估计会处理到崩溃，还有可能会因为人为原因出错。 而用爬虫，半个小时不到就可以处理好这些数据。接下来看看怎么把这些数据用Python爬下来吧。 二、先来看下爬取后数据的部分截图 1 男明星人气榜数据 2 女明星人气榜数据
Python之爬虫-中国大学排名
weixin_30814319的博客
05-07 202
Python之爬虫-中国大学排名 #!/usr/bin/env python # coding: utf-8 import bs4 import requests from bs4 import BeautifulSoup # 通过传入网址信息创建一个获取网页文本的函数 def getHTMLText(url): # 判断获取网页文本过程中是否有错误 try: ...
python爬虫猫眼电影票房_python爬取猫眼电影top100排行榜
weixin_39989443的博客
12-08 2603
爬取猫眼电影TOP100(http://maoyan.com/board/4?offset=90)1). 爬取内容: 电影名称，主演， 上映时间，图片url地址保存到mariadb数据库中;2). 所有的图片保存到本地/mnt/maoyan/电影名.png代码：import reimport pymysql as mysqlfrom urllib import requestfrom urllib...
Python爬虫：爬取电影排行榜数据并写入csv文件
qq_51447436的博客
07-27 1万+
Python爬虫：爬取电影排行榜数据并写入文件
python爬取世界大学排行榜
zhaipupu的专栏
12-29 861
#python爬取世界大学排行榜，使用bs4解析页面并写进csv文件 import requests from bs4 import BeautifulSoup import csv f = open("data2.csv",'w',encoding="utf-8") csvwriter = csv.writer(f) url= 'https://www.maigoo.com/news/603854.html' headers = { "user-agent": "Mozilla/5.0 (Win.
Python爬取猫眼电影数据及可视化
03-13
爬取猫眼的电影的数据，对数据可视化，从年份、月份、国家、明星等角度展示猫眼电影排行榜的数据。爬虫使用requests实现，解析数据使用xpath和re，保存数据用csv，使用matplotlib和pyecharts数据可视化进行比较。
Python爬取猫眼豆瓣数据
03-11
对于生成大数据海报，可能需要用到`matplotlib`或`seaborn`进行数据可视化，制作图表，如评分分布图、热门电影排行榜等。 7. **豆瓣API**：如果允许使用API，可以考虑直接调用豆瓣开放的API接口获取数据，这通常比...
python爬取排行榜_用Python爬取猫眼电影排行榜TOP100
weixin_34603528的博客
02-21 1198
主要步骤有：访问网站，获取页面源码解析页面，得到想要的数据循环爬取多个页面把数据写入本地文件1. 分析需要爬取的页面结构访问猫眼电影。观察页面，会看到首页上有排名前十的电影信息。找到页面中的分页，点击不同的页码。对比不同页面url的差别，会发现不同的分页是以offset参数作为区分的。因为每个页面都显示10条电影信息，所以offset是以10作为偏移量的。所以第1页的offset=0，第2页的of...
爬取猫眼电影的排行榜前100名
09-11
在这个项目中，我们可能使用requests.get()函数来获取猫眼电影排行榜页面的HTML源代码。请求时，我们需要指定URL（猫眼电影的排行榜页面链接）和可能的参数，如headers，模拟浏览器行为，防止被网站识别为机器人。 ...
python如何爬取猫眼电影排行榜
zhuyijun09的博客
06-02 367
-- coding:utf-8 -- import json import requests from requests.exceptions import RequestException import re import time def get_one_page(url): try: #伪装浏览器 headers = { ‘User-Agent’: ‘Mozilla/5.0 (Macinto...
Python爬虫案例：爬取世界大学排行榜，做数据可视化
aliYz的博客
02-08 2508
闲的一匹，高三生没多久就要高考了（还有四个月）也是快了，咱来看看世界大学的排行榜，采集一下，做个可视化~看看有没有你心仪的学校，嘿嘿。
爬table数据_Python爬虫 福布斯排行榜 数据可视化
weixin_33369808的博客
01-06 676
来源：zuiziyoudexiao 链接：https://blog.csdn.net/zuiziyoudexiao/article/details/108227085使用 python requests 库爬取福布斯排行榜数据存放到本地excel文件，并通过matplotlab将数据进行分析和可视化原网页如下所示https://www.phb123.com/renwu/fuhao/...
【Python爬虫】用Python爬取娱乐圈排行榜数据
阿黎逸阳的博客
04-02 1566
用python爬取娱乐圈的排行榜的数据。
LeetCode刷题offer21-简单-调整数组顺序使奇数位于偶数前面_leetcode 给定一个数组,数组中正整数乱序,调整数组中数字顺序,使得任一奇数在所有
m0_60721823的博客
04-27 234
大家好，我是布小禅，一个尽力让无情的代码变得生动有趣的IT小白，很高兴能偶认识你，关注我，每天坚持学点东西，我们以后就是大佬啦！这是我刷第道力扣简单题快来联系我，一起互相监督，一起征服力扣~~
python期末作业：批量爬取站长之家的网站排行榜数据并保存，数据分析可视化
c1007857613的专栏
05-24 574
python期末作业：批量爬取站长之家的网站排行榜数据并保存，数据分析可视化
Python爬虫以及数据可视化分析之某站热搜排行榜信息爬取分析
五包辣条的博客
02-03 4939
本项目将会对“小破站”热搜排行的数据进行网页信息爬取以及数据可视化分析
Python爬虫实战（四）：利用代理IP爬取某瓣电影排行榜并写入Excel（附上完整源码）
热门推荐
努力让自己发光，对的人才能迎着光而来
07-26 12万+
Python爬虫实战（四）：利用代理IP爬取某瓣电影排行榜并写入Excel（附上完整源码）
使用Python爬取最好大学网大学排名
绝圣弃智-零的博客
04-02 632
import requests from bs4 import BeautifulSoup import bs4 def getHTMLText(url): try: r = requests.get(url) r.raise_for_status r.encoding = r.apparent_encoding ret...
python爬取猫眼电影数据保存为csv文件
最新发布
07-19
url = "https://movie.douban.com/j/chart/top_list" # 猫眼电影排行榜URL（这里假设是这个） response = requests.get(url, headers=headers) ``` 3. 解析响应内容： ```python from bs4 import ...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值