sqlit大量数据快速查询(1)

最新推荐文章于 2023-04-28 12:06:53 发布
最新推荐文章于 2023-04-28 12:06:53 发布
阅读量1.1k 收藏
点赞数 1
分类专栏： java android 文章标签： 电话 服务器 360 手机
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/geek87/article/details/7303117
版权

最近做一个关于骗子，骚扰电话号码查询。有大约30万条数据，由于没有服务器支持只好，从网上下载下来做成一个tel.db3用于识别骗子号码。

实现功能如下：

1.一键查通话记录中的电话
2.一键查电话簿中的电话
3.一键整体检测（通话记录和电话簿）


问题是30万数据做在一个表中，肯定慢还浪费cup,内存。

笔者将其按号码的前3位为准拆分tbl_131 tbl_132...tbl_189

这样就减少了手机的压力。

体验下载

http://shouji.360safe.com/360sj/dev/20120228/team.tan.android.numquery_1.apk




 


geek87
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Android SQLite数据库进行查询优化的方法
08-26
通过建立索引，可以快速地定位到需要的数据，从而提高查询效率。在示例代码中，我们创建了三个索引：a_i、a_i2 和 a_i3，其中 a_i 是对列 a 的索引，a_i2 是对列 a 和 b 的索引，a_i3 是对列 c 的索引。 2.查询优化...
Python实现Sqlite将字段当做索引进行查询的方法
09-10
当处理大量数据时，高效查询变得至关重要，而索引正是提高查询速度的关键。本篇文章将详细介绍如何在Python中使用SQLite将字段作为索引来实现快速查询。 首先，索引是一种特殊的数据结构，它可以加速对数据库表中...
mysql几十万的速度_对拥有一个几十万行表的MySQL性能优化的简单办法_MySQL
weixin_42300418的博客
01-19 470
数据库的优化大概是在系统管理中最具有挑战性的了，因为其对人员的素质要求几乎是全方面的，好的 DBA 需要各种综合素质。在排除了操作系统，应用等引起的性能问题以外，优化数据库最核心的实际上就是配置参数的调整。本文通过一个简单的参数调整，实现了对拥有一个几十万行表的 group by 优化的例子。通过这个简单的调整，数据库性能有了突飞猛进的提升。本例子是针对 MySQL 调整的，不像其他商业数据库，M...
对于百万条数据的表关联查询如何优化sql
qq_44833298的博客
04-28 2097
对于百万条数据的表关联查询，可以采用以下一些SQL优化技巧：SELECT *
一个简单的数据量很大的表查询最新数据的sql思路
BLACK_CAT__的博客
08-04 1430
现在碰到过这样一个需求： 数据表是一张财务流水报告表,表明为 qtty_sheet ，数据量比较大，而且历史不同的报表日期的项目对应的金额数值可能会发生变化，这张表市增量更新的，需要将数据表中的最新数据拿出来进行展示，数据表的数据样式如图： 主键id proj_name(项目名称) value(项目对应的金额) report_dt(报表日期) data_dt(数据日期） 0001 营销金额 1000 20210701 20210715 0001
大厂面试官：千万级数据量的表，如何进行快速查询？
资料免费分享，点击名片
08-29 2576
推荐阅读： 我总结了72份面试题，累计3170页，斩获了30+互联网公司offer（含BATJM） 2020首战告捷,这份Java面试神技Plus版，让我成功拿到了阿里、京东、字节跳动等大厂offer 疫情之下，收到美团电话面试(成功拿下offer)，附学习路线+刷题库 前言 面试官： 来说说，一千万的数据，你是怎么查询的？ B哥：直接分页查询，使用limit分页。 面试官：有实操过吗？ B哥：肯定有呀 此刻献上一首《凉凉》 也许有些人没遇过上千万数据量的表，也不清楚查询上千万数据量的时
Android手机App程序中SQLite数据存储应用.pdf
08-26
使用 SQLite 数据库可以实现数据的快速读取和写入，减少数据的丢失和损坏风险，同时也可以实现数据的安全性和可靠性。 4. 结论 SQLite 数据库在 Android 手机 App 程序中的应用非常广泛和重要。使用 SQLite 数据库...
sqlite数据库 大数据量处理demo
06-20
1. **批量操作**：在处理大量数据时，一次性插入或更新大量记录比单个操作更高效。可以使用事务（Transactions）来确保数据的一致性，同时提高性能。例如，可以将多条INSERT语句放在一个BEGIN...COMMIT块内。 2. **...
Python使用SQLite和Excel操作进行数据分析
09-09
在数据分析领域，Python是一种强大的工具，它可以有效地处理和分析大量数据。本文主要讲解了如何使用Python结合SQLite数据库和Excel文件进行数据操作。SQLite是一个轻量级的、无服务器的、自包含的数据库引擎，它被...
SQL千万级大数据量查询优化
yanghao0571的博客
02-25 2449
转发自：https://blog.csdn.net/long690276759/article/details/79571421?spm=1001.2014.3001.5506* (防止查询资料找不到来源，很详细!!!支持原创,本人只是搬运工)
onsize里获取的对话框大小有时会包含滚动条_SQL 运行时性能统计信息的获取
weixin_39670849的博客
12-03 67
打个招呼，这一篇可能不适合 CRUD Boy/Girl. 纯做增删改查的 SQL 编码师可能会觉得偏难。假设如下的存储过程，有两段 SQL 查询组成。执行时发现，响应很慢。请问你该怎么办？有同学说，看阻塞情况，这样的：找到伤害你的元凶了，该报仇报仇，该抱怨就抱怨。又有同学说，看执行计划，这样的：这两种做法都可以尝试，且对调优也有相当的帮助。但今天要探讨的是另外一种方法，运行时获取性能统计信息。这些...
批量查询数据的sql语句
weixin_45670589的博客
12-21 5572
批量查询数据的sql语句 包括根据数字转成汉字、日期计算 <select id="queryFinaByIds" parameterType="cn.com.git.dgmsfund.api.entity.bo.finance.finaExcelBO" resultType="cn.com.git.dgmsfund.api.entity.bo.finance.finaExcelBO"> select FINANCIAL_INSTITUTION AS financialInstitution
在一个千万级的数据库查寻中，如何提高查询效率？分别说出在数据库设计、SQL语句、java等层面的解决方案。...
weixin_30885111的博客
11-10 332
在一个千万级的数据库查寻中，如何提高查询效率？分别说出在数据库设计、SQL语句、java等层面的解决方案。解答：1）数据库设计方面：a. 对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。b. 应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如： select id from t wher...
sql处理百万级以上的数据提高查询速度的方法
persistence勿忘初心
03-21 285
https://blog.csdn.net/persistencegoing/article/details/84376427 处理百万级以上的数据提高查询速度的方法： 1.应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。 2.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 3...
sql查询万级数据优化
weixin_45229417的博客
07-27 763
今天点击分页的时候，点击到86363页，出现了系统在转圈圈赚了快一分钟，寻思着以为电脑坏了，仔细一看，竟是代码的问题，于是乎请教导师之后。emmm。看来是我见识短浅了。为了提高系统的响应能力，不得不进行优化sql处理应对万级数据了。
sqlite 快速插入几百万条数据
最新发布
09-20
要在SQLite数据库中快速插入几百万条数据，可以考虑以下几种方法： 1. 使用事务（Transaction）：通过将多个插入操作封装在一个事务中，可以显着提高插入大量数据的速度。在开始事务之前，可以将数据库设置为批量插入模式（PRAGMA synchronous = OFF; PRAGMA journal_mode = OFF;）。然后，将所有插入操作放在同一个事务块中，最后提交事务。这样可以减少磁盘I/O和事务日志写入的次数，加快插入速度。 2. 使用批量插入语句：SQLite支持使用INSERT语句一次插入多个记录。可以将多个插入值放在一个INSERT语句中，通过使用多个括号或UNION ALL操作符来实现。例如，INSERT INTO table_name (column1, column2) VALUES (value1, value2), (value3, value4), ...; 使用批量插入语句可以减少SQL语句执行的次数，提高插入速度。 3. 使用预编译语句：编译和执行SQL语句是耗时的过程，特别是对于大量的插入操作。可以使用预编译语句（Prepared Statement）来解决这个问题。预编译语句将SQL语句预先编译好，并通过绑定参数来执行插入操作。这样可以避免重复编译SQL语句，提高插入速度。 4. 关闭索引和约束：在大量数据插入之前，可以暂时禁用表的索引和约束（如FOREIGN KEY约束），以加快插入速度。在插入完成后，再重新启用索引和约束。 虽然以上方法可以提高插入速度，但插入大量数据可能仍然需要一定的时间。如果数据量很大，可以考虑将数据分批次插入，每次插入一部分数据，以减少插入操作的负载和提高稳定性。此外，可以优化数据表的设计和索引，调整系统和硬件配置，以提高整体性能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值