mysql数据存储方式_数据存储在mysql的两种方式

数据存储在mysql的两种方式

发布时间：2020-05-12 16:16:25

来源：亿速云

阅读：250

作者：三月

下文主要给大家带来数据存储在mysql的两种方式，希望这些内容能够带给大家实际用处，这也是我编辑数据存储在mysql的两种方式这篇文章的主要目的。好了，废话不多说，大家直接看下文吧。

一般将数据保存到MySQL中有两种方式，同步模式和异步模式。

同步模式

同步模式是采用SQL语句，将数据插入到数据库中。但是要注意的是Scrapy的解析速度要远大于MySQL的入库速度，当有大量解析的时候，MySQL的入库就可能会阻塞。import MySQLdbclass MysqlPipeline(object):

def __init__(self):

self.conn = MySQLdb.connect('127.0.0.1','root','root','article_spider',charset="utf8",use_unicode=True)

self.cursor = self.conn.cursor() def process_item(self, item, spider):

insert_sql = """

insert into jobbole_article(title,create_date,url,url_object_id) VALUES (%s,%s,%s,%s)

"""

self.cursor.execute(insert_sql,(item["titl