疑问：sqlite多线程写操作效率问题

最新推荐文章于 2023-08-09 13:59:18 发布
最新推荐文章于 2023-08-09 13:59:18 发布
阅读量278 收藏
点赞数
分类专栏： 代码优化 文章标签： 多线程 sqlite java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mengshangwangzi/article/details/115643905
版权

sqlite多线程写操作效率问题

记一次实际项目中sqlite多线程写操作效率的问题
场景：两个db文件，每个db文件有10张表，每张表的结构都一样，各有200条纪录
需求：需要在两个db文件中各建一张新表newtable（结构和那10张表一样包括索引和其他），然后将另外10张表中的数据也就是2000条记录插入到newtable中，再删掉10张表（执行10个drop table xx;）。也就是说针对一个db，我需要执行两个写操作，insert into和drop table。

我的代码实现：
方式一
多线程：两个线程，每个线程操作一个db

方式二
单线程：按顺序操作两个db

实际结果：多线程执行的时间 大于 单线程执行的时间

疑问：明显多线程的执行效率低于单线程的执行效率，为什么

如有大佬知道原因，评论区烦请告知。在下感激不尽

梦殇王子
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
QT中sqlite多线程操作4个注意问题
07-17
总结了一下Qt中sqlite多线程操作遇到的几个问题，希望能对有需要的朋友一点帮助 总结了一下Qt中sqlite多线程操作遇到的几个问题，希望能对有需要的朋友一点帮助
C#多线程读写sqlite
05-25
多线程读写sqlite数据库，同步锁，计时测试读写性能，
Android SQLite3多线程操作问题研究总结
09-03
主要介绍了Android SQLite3多线程操作问题研究总结,本文总结了SQLite3是否支持多线程、SQLiteDatabase的同步锁、多线程读数据库等问题,需要的朋友可以参考下
Python 多线程比单线程慢？
qq_40650668的博客
07-13 1014
Python多线程
多线程为什么跑的比单线程还要慢？！
Penn_ InCSDN
05-30 1万+
首先分配cpu资源的单位是进程。一个进程分配的cpu资源是一定的。 程序在执行的过程中消耗的是cpu，比如只有一个单核cpu，多个线程同时执行工作时，需要不断切换执行，这就是线程的上下文切换，时间耗费更多，而单线程只是一个线程再跑。 多线程提高的是并发数量，执行的是不变的，比如现在有一个4核cpu的服务器，同一时间可执行4个线程，这样处理线程任务 的速度比较快。但是多出来的线程，5个，6个，7个，...
SQLite(或LitePal)查询速度很慢原因分析
qugengting的博客
07-19 5034
android数据库查询，用的是郭神的数据库框架LitePal，前期测试阶段数据量少没发现问题，app正式上线后由于数据量比较大，导致从数据库取数据非常慢，取20条数据就要十几秒。排查后发现是这样的： 我的数据封装类A： public class Form extends DataSupport { private String account; private String...
SQLite多线程并发操作
热门推荐
邑大丶捷的博客
11-27 1万+
SQLite多线程并发操作 先理清楚一个概念 多线程操作和多数据库连接操作是不同的概念 多线程操作：多线程操作数据库时可以使用一个数据库连接，也可以每个线程使用各自的数据库连接 多数据库连接操作：即每个数据库操作使用的是各自的数据库连接 SQLite默认情况下只支持单个数据库连接操作，多连接并发操作时会出问题，需要开启wal模式才能进行多项城并发读操作，写操作仍能不可以并发。 ...
android 多线程数据库读写分析与优化
08-04 8968
android数据库多线程并发读写。 多线程读写的时候， 1，多线程写，使用一个SQLiteOpenHelper。也就保证 多线程使用一个SQLiteDatabase。经测试不会引发异常。 //SQLiteDatabase.java public long insertWithOnConflict(String table, String
SQLite多线程写锁文件解决方案
weixin_33725270的博客
02-03 292
在sqlite编程中多线程同时写时会出现异常，我写了个类来解决这个问题。 思路很简单，就是在开始写操作时，记下写操作的托管线程id，表示目前有线程正在做写操作；其他线程来写时，需要先检测是否有进程正在做写操作，如果有就需要等待，等待到某一个配置的超时时间时，会抛出异常终止等待；如果没有则直接放行，此线程可以获得写锁。最后写操作执行完毕时需要释放锁。 下面是具体的代码： SQLiteWrite...
Qt SQLite数据库多线程的使用方式3
kupePoem的专栏
03-25 3337
在需要使用多线程读写数据库的场景中，可以考虑使用Qt的信号槽机制，将数据库操作放到独立的线程中执行。具体地，在子线程中创建新的数据库连接并操作数据库（同样可以使用。等类），将查询结果或操作结果通过信号/槽机制传递回主线程并更新UI界面。// 将主窗口与DBThread线程的信号/槽连接起来。// 启动一个新的线程执行数据库操作。// 在子线程中打开数据库连接。// 在子线程中执行数据库操作。// 在子线程中关闭数据库连接。// 在主线程中更新UI界面。// 新建一个线程类，用于执行数据库操作。
python多线程比单线程效率低_python多线程比单线程处理时间长，请问该如何改进？...
weixin_42300927的博客
01-14 185
各位大佬好，我用如下的代码进行文本之间的相似度计算(其中相似度计算的代码未附)，主要是多线程这块计算时间比单线程所用时间多了将近一半时间，我的文本量很大，想高效处理，请问为何我使用多线程还是如此之慢，以下代码该如何改进？`import threadingdata3 =data2[:10]start_time=time.time()for item in data3:title = item['au...
SQLite的多线程应用与iOS开发
WinLin
11-08 6365
对于SQLiite支持多线程的问题，我找到一片很不错的文章： http://www.keakon.net/2011/10/25/SQLite%E5%9C%A8%E5%A4%9A%E7%BA%BF%E7%A8%8B%E7%8E%AF%E5%A2%83%E4%B8%8B%E7%9A%84%E5%BA%94%E7%94%A8 。  文章很长，需要有耐心的读一下。  1. 对于多个进程可以同时打
mysql多线程写入为什么比单线程写入慢,为什么我的多线程比单线程慢？
weixin_39688870的博客
02-05 348
I know a couple of people asked a question similar to this, but I can’t find any response that would make me understand why it's slower.So, I made a little console program for my own understanding of ...
java-并发编程
weixin_45845680的博客
02-27 72
java并发编程
sqlite3多线程操作问题
最新发布
多看多听多总结
08-09 2705
1、多线程读，多线程写，只使用共同一个数据库连接，即使用同一个SQLiteHelper连接，调用sqlite3_busy_timeout。2、多线程读，单线程写，每个线程使用各自独立的数据库连接，但是需要开启wal模式，以开启数据库连接池。在项目中使用sqlite3，有时会报database is locked。开启wal通过如下语句。
Sqlite大批量导入数据提高效率的几种方式
qq_43248127的博客
02-08 3620
原文链接：添加链接描述 Sqlite大批量导入数据提高效率的几种方式 本文为转载文章，转载地址： http://blog.csdn.net/majiakun1/article/details/46607163(1-5，8小结) http://blog.csdn.net/lijinqi1987/article/details/51852721(6-7小结) 前言 SQLite数据库由于其简单、灵活、轻量、开源，已经被越来越多的被应用到中小型应用中。甚至有人说，SQLite完全可以用来取代c语言中的文件读写操作
关于sqlite多线程
Kronus的专栏
11-26 8161
这几工作需要，用到sqlite多线程功能，这几天研究了一下，验证了一下结果，供大家参考： 1、如果是SQLITE_OPEN_FULLMUTEX，也就是串行化方式，则对于连接时互斥的，只有一个连接关闭，另外一个连接才能读写 2、如果是SQLITE_OPEN_NOMUTEX，则是多线程模式，对于写是互斥的，但是如果一个连接持续写，另外一个连接是无法写入的，只能是错误或者超时返回。不
利用读写锁实现sqlite多线程写的问题
小郑的博客
02-24 5747
之前项目中利用sqlite存储解析后的数据，网上的资料并没有找到sqlite本身机制对于多线程如何支持，所以就利用每个线程一个库，最后在合并，今天看到读写锁SRWLOCK时，决定尝一下解决多线程写sqlite的问题如愿解决：    测试代码    main函数中:sqlite3_open_v2("test.db",&m_db,SQLITE_OPEN_CREATE|SQLITE_OPEN_R...
sqlite多线程操作注意问题
changwilling的博客
11-25 3057
1. sqlite数据库使用面临的问题：多线程同时访问       Thread A和Thread B 同时创建SQLiteDatabas，来操作数据库(主要是insert操作)：       下面的DataBaseHelper extends SqliteOpenHelper       * Thread A:          Context context = getApplicat
sqlite多线程操作
07-28
引用\[1\]:根据官方文档，从3.3.1版本开始，SQLite支持多线程并发访问数据库，但要求设置为SQLITE_THREADSAFE模式。每个数据库连接只能在一个线程中使用，不可多个线程共用一个数据库连接。\[1\]引用\[2\]:SQLite默认情况下只支持单个数据库连接操作，多连接并发操作时会出问题，需要开启wal模式才能进行多项城并发读操作，写操作仍不能并发。\[2\]根据这些信息，可以得出以下结论：在SQLite中，多线程操作数据库有两种解决方案。第一种是多线程读和写，只使用一个数据库连接，这种情况下由于使用的是同一个数据库连接，SQLite内部有锁机制，不会出现异常。但是这种多线程操作并不是真正的并发操作，由于锁机制的存在，仍然是阻塞的。第二种是多线程读和单线程写，每个线程使用独立的数据库连接，并开启wal模式。这种情况下可以实现多线程并发读操作，但写操作仍然只能单线程进行。如果多个线程同时写入（每个线程使用独立的数据库连接），就会出现问题。\[2\]在实际测试中，方案一的用时是方案二的两倍多。\[2\]关于方案一的具体实现，有两种方式：一是开启一个数据库连接永不关闭，二是自己编写一个管理类来实现。\[2\]要开启wal模式，可以使用SQLiteDatabase.enableWriteAheadLogging()方法。\[2\]在多线程操作SQLite时，可能会遇到数据库被锁定的问题，这可能是由于子线程执行的query函数有问题导致的。\[3\] #### 引用[.reference_title] - *1* [SQLite的多线程应用与iOS开发](https://blog.csdn.net/pcliuguangtao/article/details/8123473)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [SQLite多线程并发操作](https://blog.csdn.net/a987687115/article/details/84566282)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [Android SQLite多线程读写和线程同步源码分析](https://blog.csdn.net/z979451341/article/details/79593551)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值