Scrape Center爬虫闯关记录

前言

Scrape Center爬虫闯关记录

spa1

class FirstSpider(scrapy.Spider):
    name = "first"
    start_urls = [f'https://spa1.scrape.center/api/movie/?limit=10&offset={a}' for a in range(0, 91, 10)]

    def parse(self, response, *args, **kwargs):
        dict_data = json.loads(response.text)  # 获取响应的字符串形式 然后转换为json对象
        for i in range(0, 10):
            title = dict_data["results"][i]["name"]
            print(title)

项目介绍

提示：这里可以介绍项目的主要内容，记得删除示例哦。

例如：根据项目官网，简单说下这个项目：基于 Spring Cloud Hoxton 、Spring Boot 2.2、 OAuth2 的 RBAC 权限管理系统；基于数据驱动视图的理念封装 element-ui，即使没有 vue 的使用经验也能快速上手；提供对常见容器化支持 Docker、Kubernetes、Rancher2 支持；提供 lambda 、stream api 、webflux 的生产实践。（本段引用自：5 个接私活必备的 Java 开源项目！）