MySQL中使用distinct单、多字段去重方法
目录一、distinct
1.1 只对一个字段查重
1.2多个字段去重
1.3针对null处理
1.4与distinctrow同义
二、聚合函数中使用distinct
三、CONCAT_WS函数
多个字段拼接去重是指将多个字段的值按照肯定的规则进行拼接,并去除重复的拼接效果。如许可以生成唯一标识符或者进行数据统计。
一、distinct
distinct用来查询不重复记录的条数,即distinct来返回不重复字段的条数(count(distinct id)),其缘故起因是distinct只能返回他的目的字段,而无法返回其他字段
用法注意:
[*]distinct【查询字段】,必须放在要查询字段的开头,即放在第一个参数;
[*]只能在SELECT 语句中使用,不能在 INSERT, DELETE, UPDATE 中使用;
[*]DISTINCT 体现对后面的全部参数的拼接取不重复的记录,即查出的参数拼接每行记录都是唯一的
[*]不能与all同时使用,默认环境下,查询时返回的就是全部的效果。
1.1 只对一个字段查重
对一个字段查重,体现选取该字段一列不重复的数据。
示例表:psur_list
https://img-blog.csdnimg.cn/direct/d6d840f7004f461e8e6086ac4229c961.png
PLAN_NUMBER字段去重,语句:
SELECT DISTINCT PLAN_NUMBER FROM psur_list; https://img-blog.csdnimg.cn/direct/0bfccc6dae4640ec9c40c2de9a478470.png
1.2多个字段去重
对多个字段去重,体现选取多个字段拼接的一条记录,不重复的全部记录
PLAN_NUMBER和PRODUCT_NAME字段去重,语句:
SELECT DISTINCT PLAN_NUMBER,PRODUCT_NAME FROM psur_list; https://img-blog.csdnimg.cn/direct/5eb65f762fdc467fb8c853d68358c55d.png
期望效果:只对第一个参数PLAN_NUMBER取唯一值
办理办法一:使用group_concat 函数
语句:
SELECT GROUP_CONCAT(DISTINCT PLAN_NUMBER) AS PLAN_NUMBER,PRODUCT_NAME from psur_list GROUP BY PLAN_NUMBER https://img-blog.csdnimg.cn/direct/f7b0afa257504f0d8075b52b6e799d96.png
办理办法二:使用group by
语句:
SELECT PLAN_NUMBER,PRODUCT_NAME FROM psur_list GROUP BY PLAN_NUMBER https://img-blog.csdnimg.cn/direct/052106d626464987bbd47cddf7fcb7e8.png
1.3针对null处理
distinct不会过滤掉null值,返回效果包含null值
表psur_list如下:
https://img-blog.csdnimg.cn/direct/d63792489f9e46a6951dd359a582d095.png
对COUNTRY单字段去重,语句:
SELECT DISTINCT COUNTRY FROM psur_list https://img-blog.csdnimg.cn/direct/d8b9a2a31ff94b5d8b6061fd5a6df592.png
对COUNTRY多字段去重,语句:
SELECT DISTINCT PRODUCT_NAME,COUNTRY FROM psur_list https://img-blog.csdnimg.cn/direct/93a5d35d24054c298b210e9644619642.png
1.4与distinctrow同义
语句:
SELECT DISTINCTROW COUNTRY FROM psur_list
https://img-blog.csdnimg.cn/direct/ae45b06690da435b806e21d795cfb8ba.png
二、聚合函数中使用distinct
在聚合函数中DISTINCT 一样平常跟 COUNT 结合使用。count()会过滤掉null项
SELECT DISTINCT COUNTRY FROM psur_list
https://img-blog.csdnimg.cn/direct/8d6058dfa74e4803b675a6e968d89bec.png
语句:
SELECT COUNT(DISTINCT COUNTRY) FROM psur_list 效果如下:【实际包含null项有4个记录,实行语句后过滤null项,盘算为3】
https://img-blog.csdnimg.cn/direct/085149b6114a41dcbadeacfc53619341.png
例二:多字段
SELECT DISTINCT PRODUCT_NAME,COUNTRY FROM psur_list
//9条 https://img-blog.csdnimg.cn/direct/bc25d87d07d6402398a3f6692abf213b.png
语法:
SELECT COUNT(DISTINCT PRODUCT_NAME,COUNTRY) FROM psur_list https://img-blog.csdnimg.cn/direct/3c2898525ea84deca82a11094f961df1.png
两者都把null行过滤了,注意使用。
三、CONCAT_WS函数
创建测试表
起首,我们需要创建一个测试表来演示多个字段拼接去重的过程。假设我们有一个users表,包含以下字段:
id name age gender
1 Alice 25 Female
2 Bob 30 Male
3 Alice 25 Female
4 Alice 30 Female
我们将使用这个表来进行演示。
使用GROUP_CONCAT函数进行拼接
MySQL提供了GROUP_CONCAT函数,可以用来将一列的值进行拼接。我们可以使用这个函数来实现多个字段的拼接。
下面的示例将演示怎样将name和age字段进行拼接,并去重:
SELECT GROUP_CONCAT(DISTINCT CONCAT(name, age) SEPARATOR ',')
FROM users; 运行以上SQL语句,将会返归去重后的拼接效果:
Alice25,Alice30,Bob30
使用CONCAT_WS函数进行拼接
除了GROUP_CONCAT函数,MySQL还提供了CONCAT_WS函数,它可以将多个字段的值进行拼接,并使用指定的分隔符进行分隔。
下面的示例将演示怎样将name和age字段进行拼接,并使用逗号作为分隔符:
SELECT CONCAT_WS(',', name, age)
FROM users
GROUP BY name, age; 运行以上SQL语句,将会返回拼接后的效果:
Alice,25
Alice,30
Bob,30 去除重复的拼接效果
在上述示例中,我们可以看到,使用GROUP_CONCAT或者CONCAT_WS函数可以将多个字段进行拼接,但是它们并不能去除重复的拼接效果。假如我们需要去除重复的拼接效果,可以使用子查询和DISTINCT关键字来实现。
下面的示例演示了怎样使用子查询和DISTINCT关键字往复除重复的拼接效果:
SELECT DISTINCT CONCAT_WS(',', name, age)
FROM (
SELECT name, age
FROM users
GROUP BY name, age
) AS subquery; 运行以上SQL语句,将会返归去重后的拼接效果:
Alice,25
Alice,30
Bob,30
参考文章:
【sql】MySQL中使用distinct单、多字段去重方法_mysql distinct 多个字段-CSDN博客
mysql GROUP_CONCAT函数详解-CSDN博客
mysql 多个字段拼接去重(GROUP_CONCAT)_mysql group_concat 去重-CSDN博客
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页:
[1]