u011532014的博客

scrapy 爬虫 创建项目： scrapy startproject dangdang 进入工程中： cd ../dangdang 生成爬虫程序： scrapy genspider dangdang dangdang.com 使用pycharm 编写爬虫程序： 1、items.py 通过 items.py 程序中生成需要保存的字段，格式为：name=scrapy.Field() ...

# -*- coding: utf-8 -*- from …items import JingdongItem from copy import deepcopy import scrapy import json import urllib.parse import re class JingdongspiderSpider(scrapy.Spider): name = ‘jingdongsp...