![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
Shelter
这个作者很懒,什么都没留下…
展开
-
rides-scrapy 分布式爬取当当网图书
redis-scarpy 分布式爬取当当网图书Spider继承 RedisSpider 的 Spider继承 RedisCrawlSpider 的 Spidersettings 的配置itemspipelinesSpider继承 RedisSpider 的 Spider# -*- coding: utf-8 -*-import scrapyfrom circ.items import C...原创 2019-01-02 14:34:25 · 284 阅读 · 0 评论 -
selenium 和 scrapy 配合爬取京东
selenium 和 scrapy 配合爬取京东spiderMiddlewaresitemssettingspipelinesspiderimport scrapyfrom JD.items import JdItemfrom selenium import webdriverfrom selenium.webdriver.firefox.options import Options...原创 2019-03-20 18:25:45 · 408 阅读 · 0 评论 -
tornado URL 的命名和重定向
tornado URL 的命名和重定向使用 tornado.web 下的 url 函数可以为路由添加 name 属性,原有功能不变from tornado.web import Application, url url(r'/', views.HelloWorld, name='helloworld') # 为路由起一个名字 'helloworld'继承 RequestHandler ...原创 2019-05-20 09:55:49 · 1781 阅读 · 1 评论