MySQL过滤部分字段重复的数据
发布时间：01/15 来源： 浏览：
关键词：
过滤重复数据最直接的办法就是使用select distinct可以去掉重复记录这个是过滤所有的重复内容了，但有时我们需要保留一条信息，下面来看看如何实现吧。
select distinct可以去掉重复记录。
disctinct将重复的记录忽略，但它忽略的是完全一致的重复记录，而不是其中某个字段重复的记录，或者说，distinct查询一个字段时好使，多个字段就不好使。
所以用聚合函数和group by实现
注意：group by只能跟聚合函数搭配使用
例表
ID username password TRDESC …………………… 1 A abcdef QR 2 A abcdef W34 3 A bbbbbb AD 4 B aaaaaa asdf
查询username和password组合起来的条件不能重复的查询结果（这个都能重复，不能不说这是个烂摊子）
当username和password重复时，取ID最大的记录:
select * from mytable where ID in(select max(ID) from mytable group by username,password)
当username和password重复时，取ID最小的记录：
select * from mytable where ID in(select min(ID) from mytable a group by username,password)
接着看个例子获取某字段不重复数据，删除某字段重复数据
关于删除某个字段重复记录，从网上搜索了一下，有些人写的方法运行不了，好像是mysql不支持那种语法，不过最后还是找到了另一个人写的可以执行的方法，相对来说还是比较简单，效率那只有在大数据量情况下才能证实了。
个人实践是没问题的。具体操作示例如下：
表：test
表结构及数据：
要求：删除name字段中重复的记录
删除语句：
第一种：delete from a using test as a,test as b where a.id>b.id and a.name = b.name;//保留旧记录 第二种：delete from a using test as a,test as b where a.id<b.id and a.name = b.name;//保留新记录
使用第一种删除得出的结果：
结果删除id=3，name=test的记录，因为这条记录和id=1，name=test记录出现name字段值重复。
直接查询name字段不重复数据，可以用：
SELECT * FROM ring_resource AS A WHERE id = (SELECT MAX(id) FROM ring_resource WHERE name = A.name)
