mysql去重复 保留一条

mysql去重复 保留一条,第1张

mysql去重复 保留一条怎么 *** 作呢?一起来看下吧:

1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断

SELECT     * FROM     people WHERE     peopleId IN (         SELECT             peopleId         FROM             people         GROUP BY             peopleId         HAVING             count(peopleId) > 1     )

2、删除表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,只留有rowid最小的记录

DELETE FROM     people WHERE     peopleName IN (         SELECT             peopleName         FROM             people         GROUP BY             peopleName         HAVING             count(peopleName) > 1     ) AND peopleId NOT IN (     SELECT         min(peopleId)     FROM         people     GROUP BY         peopleName     HAVING         count(peopleName) > 1 )

3、查找表中多余的重复记录(多个字段)

SELECT     * FROM     vitae a WHERE     (a.peopleId, a.seq) IN (         SELECT             peopleId,             seq         FROM             vitae         GROUP BY             peopleId,             seq         HAVING             count(*) > 1     )

4、删除表中多余的重复记录(多个字段),只留有rowid最小的记录

DELETE FROM     vitae a WHERE     (a.peopleId, a.seq) IN (         SELECT             peopleId,             seq         FROM             vitae         GROUP BY             peopleId,             seq         HAVING             count(*) > 1     ) AND rowid NOT IN (     SELECT         min(rowid)     FROM         vitae     GROUP BY         peopleId,         seq     HAVING         count(*) > 1 )

5、查找表中多余的重复记录(多个字段),不包含rowid最小的记录

SELECT     * FROM     vitae a WHERE     (a.peopleId, a.seq) IN (         SELECT             peopleId,             seq         FROM             vitae         GROUP BY             peopleId,             seq         HAVING             count(*) > 1     ) AND rowid NOT IN (     SELECT         min(rowid)     FROM         vitae     GROUP BY         peopleId,         seq     HAVING         count(*) > 1 )

6、消除一个字段的左边的第一位:

UPDATE tableName SET [ Title ]= RIGHT ([ Title ],(len([ Title ]) - 1)) WHERE     Title LIKE '村%'

7、消除一个字段的右边的第一位:

UPDATE tableName SET [ Title ]= LEFT ([ Title ],(len([ Title ]) - 1)) WHERE     Title LIKE '%村'

8、假删除表中多余的重复记录(多个字段),不包含rowid最小的记录

UPDATE vitae SET ispass =- 1 WHERE     peopleId IN (         SELECT             peopleId         FROM             vitae         GROUP BY             peopleId

mysql数据表中有多条重复数据记录,现在想删除删除部分重复数据,保留最后一条更新或者插入的数据。

以学生表为例,我们创建一个简单的数据表来做实验:

往表里面插入一些实验数据:

我们可以根据分组查询先将重复数据查询出来,同时也可以获取到最后的更新时间,然后再与原表联表查询小于最大时间的数据,将查询出来的数据删除。

------先来慢慢消化-------

在做删除前,我们可以先看看有哪些数据是有重复的:

可以看到张三,李四,王五的数据是有重复的,赵六没有重复,下面我们查找最后更新的记录。

可以看到,最后更新的数据为15:57:46的记录没有在结果中。

可以看到重复记录已经被清理掉。

假如有两行记录是完全一样的,这个方法就不可行了,往表里面在跑一次数据插入:

执行删除计划:

创建一个临时表存放最后插入的一条数据(包含重复与没有重复的),然后清空原表,再将临时表的数据复制到原表中,最后把临时表删除。

这个很好理解,相当于ctrl+c,ctrl+v的 *** 作,数据表如下:

这样数据去重就完成了,需要注意的是, 如果表数据量很大,注意在group by 里面的字段建立索引,同时,生产环境注意好先进行数据备份 *** 作 。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/7373921.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-04
下一篇 2023-04-04

发表评论

登录后才能评论

评论列表(0条)

保存