scrapy 数据存储在 django model中

pip install scrapy-djangoitem,pywin32

一、写好models文件

二、配置scrapy -- settings

import os
import sys
import django
from django.core.wsgi import get_wsgi_application

sys.path.append(os.path.dirname(os.path.abspath('.')))
os.environ['DJANGO_SETTINGS_MODULE'] = 'kyzs.settings'
application = get_wsgi_application()
django.setup()

三、写好scrapy items文件

import scrapy
from ks.models import ENGLISH_GRE   # important
from scrapy_djangoitem import DjangoItem   #important

class GrecrawlItem(DjangoItem):  #The argument
          django_model=ENGLISH_GRE  

四、写好sipders文件

五、写好pipelines文件

class GrecrawlPipeline(object):
        def process_item(self, item, spider):
              item.save()
              return item