怎么去除mysql字段中的重复值

MySQL查询重复字段,及删除重复记录的方法

数据库中有个大表，需要查找其中的名字有重复的记录id，以便比较。如果仅仅是查找数据库中name不重复的字段，很容易:

SELECT min(`id`),`name` FROM `table` GROUP BY `name`

但是这样并不能得到说有重复字段的id值。（只得到了最小的一个id值）查询哪些字段是重复的也容易:

SELECT `name`,count(`name`) as count FROM `table` GROUP BY `name` HAVING count(`name`) >1 ORDER BY count DESC

但是要一次查询到重复字段的id值，就必须使用子查询了，于是使用下面的语句。

SELECT `id`,`name` FROM `table` WHERE `name` in (

SELECT `name`

FROM `table`

GROUP BY `name` HAVING count(`name`) >1)

但是这条语句在mysql中效率太差，感觉mysql并没有为子查询生成零时表。于是使用先建立零时表:

create table `tmptable` as (

SELECT `name`

FROM `table`

GROUP BY `name` HAVING count(`name`) >1)

1、可以用PB、PLSQL Developer等软件，把表的数据倒成SQL文件，在MySql中执行！2、也可以尝试写数据迁移程序，大概步骤是这样：1）、根据双方数据库的数据字典，罗列出需要的字段2）、编写相应的迁移程序，主要注意的地方就是Oracle的数据类型要做相应的转换，转移成DB2里有的，删除倒出时一些无用的数据，使导入的数据具有意义！3）、抽取数据做验证！3、如果数据量不大的话，完成可以用把表的数据倒成SQL文件再执行！

---