数据库删除冗余数据简单思路

最新推荐文章于 2023-09-09 10:24:21 发布
最新推荐文章于 2023-09-09 10:24:21 发布
阅读量990 收藏 1
点赞数
分类专栏： 数据库 文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_32950103/article/details/102944909
版权

废话不多说，直接上sql：
在这里插入图片描述
首先为什么会有冗余数据或者说怎么才算冗余的数据呢？
比方说数据库id没有设置主键，那么重复的id数据就算是冗余数据。
比方说规定id和code组合不能重复，那么id和code组合重复了就是冗余数据。
数据冗不冗余看你的规定。
然后要删除冗余数据就要找到冗余的规则
我这里的dim_id和attribute_code组合拼接就是规则，所以这个拼接的字符串记录重复的就是将要删除的数据，但是同一冗余项有几条数据的，到底要删除那几条，保留那一条呢？
所以第二个子查询就是对应的这个记录的过滤。
思路如上，如有不当请指正。谢谢

Requiem零
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
SQL面试题-删除冗余数据.sql
04-07
1、删除a、b、c中相同记录 2、删除a、b、c完全相同的记录,但保留一条。
西电数据库期末复习资源
03-26
第一范式（1NF）、第二范式（2NF）、第三范式（3NF）和BCNF（博科斯范式）是数据库规范化的基本原则，旨在减少数据冗余和提高数据一致性。此外，实体-关系模型（E-R模型）是数据库设计的可视化工具，帮助我们将现实...
SQL查询重复数据和清除重复数据
热门推荐
rockyvan的专栏
05-20 10万+
选择重复，消除重复和选择出序列 有例表：emp emp_no   name    age         001           Tom      17         002           Sun       14         003           Tom      15         004           Tom      16 要求： 列出所有
数据库消除冗余_如何消除冗余数据的安全风险
cxt70571的博客
07-07 3486
数据库消除冗余 搬家时，您可以选择如何处理所有积累的东西。 您可以出售或捐赠您多年来积累的大部分东西。 或者，您可以移动它，因为您没有时间或精力去弄清楚自己保留的东西以及如何处置不需要的东西。 大多数企业以第二种方式将其数据迁移到公共云：他们只是将所有数据从数据中心运到云中。 通常，本地数据库中没有单一的事实来源，因此所有数据都移至公共云，从而保留了所有冗余。 [InfoWorld的要点...
Sqlserver删除表中冗余数据
ZongkeXiao的博客
03-17 506
面试之sql——删除冗余数据
weixin_42729132的博客
03-26 2975
昨天去面试，又碰到一个头痛的sql题，软肋呀！特总结备用； 这是重复数据。 1、我们先查询出里面的冗余数据； mysql> select *from user1 where id not in (select min(s.id) from (select * from user1) s group by s.name,s.age); 可见，mysql这是查询的是除id以外一样的数据（只是...
Oracle数据库性能的优化设计思路研究.pdf
10-09
Oracle数据库是广泛应用于各种工作场景的强大关系型数据库系统，它基于高级结构化查询语言SQL，能够处理大量的数据存储和检索任务。为了确保Oracle数据库在多种情况下的高效、稳定和安全运行，需要对其进行优化设计...
Oracle数据库性能的优化设计思路研究 (1).pdf
10-09
根据查询模式创建和维护合适的索引，避免冗余和过度索引，同时监控索引的使用情况，及时更新或删除无效索引。 3.3 SQL和PL/SQL优化 使用EXPLAIN PLAN分析查询执行计划，调整SQL语句以减少全表扫描，利用绑定变量...
2019年数据库课程设计小组.zip
最新发布
01-13
此外，还需要进行范式理论的学习，确保数据库设计符合第一范式、第二范式、第三范式，甚至更高范式，以避免数据冗余和更新异常。 3. **数据库管理系统（DBMS）**：学生可能会使用常见的DBMS，如MySQL、Oracle、SQL ...
数据库课后习题答案
08-18
再者，SQL（Structured Query Language）是数据库操作的语言，包括数据查询、插入、更新和删除等操作。学习者应熟练掌握SQL语法，例如，如何使用SELECT语句进行复杂查询，涉及JOIN、WHERE、GROUP BY、HAVING等子句。...
SQL去重 清除冗余数据
12-16
SQL去重,顾名思义,是清除查询结果或者是数据库里不必要的相对某个字段的冗余数据.
删除数据库冗余数据 代码直接可用
Z_X_S_的专栏
03-19 410
delete where ScoreId not in (select max(ScoreId) from dbo.Score group by [Name], Score, GroupId, IP) 删除冗余的行数就是一个删除，然后用分组查寻出不是冗余的，然后再删除
了解数据库表冗余字段！
Do_LaLi的博客
07-23 666
设置冗余字段的要求： 设置冗余字段要求该字段不常变化，方便维护。 为什么要设置冗余字段？ 虽然说冗余字段的存在，不符合三大范式，但是存在即合理。 冗余字段的合理使用可以大大提高数据库的查询效率，方便开发。 ...
数据库冗余是否必要
weixin_30799995的博客
05-16 831
我们在这里假设认为遵守数据库设计的范式，不要冗余的为正方：认为设计数据库设计需要设计一些适当冗余的为反方：希望大家能结合自己设计经验，展开积极的讨论：下面是我举的一个例子：比如做一个单据表，主要字段单号商品编号商品名称单价数量正方：单据表只能有“单号商品编号单价数量”这几个字段，没有“商品名称”这个字段，要显示这...
数据库如何删除数据
touch12344的博客
03-14 1万+
对于由 Foreign Key (外键) 约束引用的表，不能使用 Truncate Table，而应使用不带 Where子句的 Delete 语句。要删除表用Drop；TruncateE只能对TABLE，Delete可以是TABLE和VIEW，Truncate和Delete只删除数据，Drop则删除整个表（结构和数据）。2、truncate (清空表中的数据)：删除内容、释放空间但不删除定义(保留表的数据结构)。2、在使用drop和truncate时一定要注意，虽然可以恢复，但为了减少麻烦，还是要慎重。
数据冗余以及为什么数据库的数据具有较小的冗余性？
qq_46396470的博客
09-09 1191
要回答这个问题，我们首先要知道，什么是数据冗余，来看看智库给出的定义:是指同一个数据在系统中多次重复出现。例如在设计数据库时，某一字段属于一个表，但它又同时出现在另一个或多个表，且完全等同于它在其本来所属表的意义表示，那么这个字段就是一个冗余字段。我相信以上解释应该已经很明了，数据冗余就是重复的数据嘛，此时我们可以考虑来回答这个问题了，适当的冗余可以提高系统安全性，如数据备份，但是如果。刚才我提了一句“适当的冗余”，其实，适当的冗余还是有非常多好处的，具体有以下主要的功能:①数据间建立联系。
如何删除数据库中的冗余数据
Carterslam
11-13 1127
此文出处:http://database.ctocio.com.cn/205/9276705.shtml 　　作为数据库的开发者，我们经常面临着要找出及删除数据库中冗余数据的任务，如果数据库中有大量的冗余数据(占总数的百分比太多)，数据的精确性和可靠性将受到影响，同时也影响着数据库的性能，那么如何解决这个问题呢?下面我将探讨关于这个问题的这个解决方案，oracle也为我们提供了一个解决方案，...
删除数据库中冗余信息
purple25的博客
11-29 3971
eg： id  学号         姓名    课程编号  课程名称  分数 id sid             name    cno         cname     score 1 2016001   张三      0001         数学         69 2 2016002   李四     0001         数学         89 3 2016
什么是数据冗余?
weixin_43737594的博客
10-20 1万+
数据冗余 数据冗余:在一个数据集合中重复的数据称为数据冗余 例如在设计数据库时，某一字段属于一个表，但它又同时出现在另一个或多个表，且完全等同于它在其本来所属表的意义表示，那么这个字段就是一个冗余字段。 关系数据库中的数据冗余主要是指关系数据库中同一信息数据的重复存贮。 数据冗余浪费了宝贵的资源，应尽量减少。但关系数据库中为实现一些功能有些数据冗余是必需的。必需的数据冗余主要用于以下用途： 数据间建立联系，如两表间通过共同属性建立联系； 数据恢复，如建立备份文件以备正式文件被破坏时恢复； 数据核查
数据库优化的思路以及实现思路。并举例说明
04-07
数据库优化的思路： 1. 分析数据库表结构，优化数据类型、索引、表关系等设计，以减少数据冗余和提高查询性能。 2. 优化SQL查询语句，避免全表扫描、重复查询等问题，提高查询速度。 3. 缓存数据，减少数据库访问频率，提高系统性能。 4. 优化数据库服务器硬件配置，如磁盘、内存、CPU等，以提高系统响应速度。 5. 定期清理无用数据，减少数据库负担。 6. 分析应用程序的数据访问模式，合理使用连接池、事务等技术，优化数据库操作流程。 7. 监控数据库性能指标，及时发现问题并进行调整。 实现思路： 1. 定期进行数据库表结构分析，对需要优化的地方进行修改。 2. 对频繁查询的SQL语句进行优化，如增加索引、避免使用子查询等。 3. 缓存数据的实现可以使用Redis等缓存组件，将热点数据缓存到内存中，减少数据库访问次数。 4. 对数据库服务器硬件配置的优化，需要根据具体情况进行调整，如增加内存、使用SSD等。 5. 定期进行数据清理，如删除过期数据、清空历史日志等。 6. 对应用程序的数据访问模式进行分析，合理使用连接池、事务等技术，优化数据库操作流程。 7. 使用监控工具对数据库性能指标进行监控，及时发现问题并进行调整。例如使用MySQL自带的Performance Schema、Slow Query Log等。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值