![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
文章平均质量分 94
joker柒月
热爱的就要做到极致
展开
-
Scrapy入门
1.创建项目 用Scrapy命令生成: scrapy startproject tutorial该命令将会创建包含下列内容的 tutorial 目录:tutorial/ scrapy.cfg tutorial/ __init__.py items.py pipelines.py settings.py ...转载 2018-06-11 20:14:37 · 179 阅读 · 0 评论 -
Python3.6下安装Scrapy
Scrapy是一个十分强大的爬虫框架,依赖的库比较多,至少需要依赖的库有Twisted 14.0、lxml 3.4和pyOpenSSL 0.14。在不同的平台环境下,它所依赖的库也各不相同,所以在安装之前,最好确保把一些基本库安装好。本节就来介绍Scrapy在不同平台的安装方法。1. 相关链接官方网站:https://scrapy.org官方文档:https://docs.scrapy.orgPy...转载 2018-06-11 22:57:52 · 4432 阅读 · 0 评论 -
Scrapy入门(1)
quotes.py# -*- coding: utf-8 -*- import scrapy from tutorial.items import QuoteItem class QuotesSpider(scrapy.Spider): # name用于区别Spider。 该名字必须是唯一的,您不可以为不同的Spider设定相同的名字 name = 'quotes' #...转载 2018-06-12 10:19:14 · 173 阅读 · 0 评论