数据库根据指定字段去重的案例分析


这篇文章主要介绍了数据库根据指定字段去重的案例分析,具有一定借鉴价值,需要的朋友可以参考下。希望大家阅读完这篇文章后大有收获。下面让小编带着大家一起了解一下。需求:对一张用户表根据name/email/card_num字段去除重复数据思路:用group by方法可以查询出’去重’后的数据,将这些数据存储到一张临时表中,然后将临时表的数据存储到指定的表中;误区及解决方案:group by方法只能获取部分字段(去重指定字段),不能一次获取到完整的数据,但是可以通过max函数获取group by结果集中的id,再根据id集合查询出全部的记录。SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num;SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num) as T;SELECT * from users where id in (SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,e开发云主机域名mail,card_num) as T);create TEMP TABLE tmp_data as SELECT * from users where id in (SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num) as T);insert into users_copy1 select * from tmp_data;select count(*) from users_copy1;测试结果:1.4w条数据中有2300条数据重复,实际运行结果为0.7s,基本满足现在的需求。感谢你能够认真阅读完这篇文章,希望小编分享数据库根据指定字段去重的案例分析内容对大家有帮助,同时也希望大家多多支持开发云,关注开发云行业资讯频道,遇到问题就找开发云,详细的解决方法等着你来学习!

相关推荐: Mysql中distinct与group by的去重方面的区别

distinct简单来开发云主机域名说就是用来去重的,而group by的设计目的则是用来聚合统计的,两者在能够实现的功能上有些相同之处,但应该仔细区分。单纯的去重操作使用distinct,速度是快于group by的。distinct支持单列、多列的去重方式…

免责声明:本站发布的图片视频文字,以转载和分享为主,文章观点不代表本站立场,本站不承担相关法律责任;如果涉及侵权请联系邮箱:360163164@qq.com举报,并提供相关证据,经查实将立刻删除涉嫌侵权内容。

(0)
打赏 微信扫一扫 微信扫一扫
上一篇 06/12 11:23
下一篇 06/12 15:44

相关推荐