[Python/爬虫]利用xpath爬取豆瓣电影top250

最新推荐文章于 2024-05-02 07:00:29 发布

小恩阿

最新推荐文章于 2024-05-02 07:00:29 发布

阅读量4.2k

点赞数 2

文章标签： python html url 豆瓣爬虫

本文链接：https://blog.csdn.net/yyy72999/article/details/75257574

版权

今天学习了一下xpath 感觉功能非常的强大，但是如果不太懂前端的小伙伴们可能比较吃力，建议看一下html的一些语法结构，代码如下：

#!/usr/bin/env python
import re
import requests
import  lxml.html
url = 'https://movie.douban.com/top250?start={}&filter='
class DownloadUrl(object):
    def __init__(self,url):
        self.url = url
        self.head  = {
  'user-agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_5) AppleWebKit/537