博客
关于我
Postgresql distinct/ distinct on
阅读量:392 次
发布时间:2019-03-05

本文共 4007 字,大约阅读时间需要 13 分钟。

作者:瀚高PG实验室 (Highgo PG Lab)- 狮子歌歌

  • SELECT DISTINCT select_list … (NULL在DISTINCT [ON] 中视为相等)

show code

postgres=# create table t3 (id int );CREATE TABLEpostgres=# insert into t3 values (1);INSERT 0 1postgres=# insert into t3 values (2);INSERT 0 1postgres=# insert into t3 values (null);INSERT 0 1postgres=# insert into t3 values (null);INSERT 0 1postgres=# insert into t3 values (null);INSERT 0 1postgres=# select * from t3 ; id ----  1  2         (5 rows)postgres=# select distinct id from t3 ; // 这个结果证明了 null 在postgresql里被视为相等 id ----     1  2(3 rows)
  • DISTINCT ON 的用法

Here expression is an arbitrary value expression that is evaluated for all rows. A

set of rows for which all the expressions are equal are considered duplicates, and
only the first row of the set is kept in the output. Note that the “first row” of a set is
unpredictable unless the query is sorted on enough columns to guarantee a unique
ordering of the rows arriving at the DISTINCT filter. (DISTINCT ON processing
occurs after ORDER BY sorting.)

意思是DISTINCT ON ( expression [, …] )把记录根据[, …]的值进行分组,分组之后仅返回每一组的第一行。

需要注意的是,如果你不指定ORDER BY子句,返回的第一条的不确定的。如果你使用了ORDER BY 子句,
那么[, …]里面的值必须靠近ORDER BY子句的最左边。

废话不多说, 举个例子吧:

postgres=# CREATE TABLE score_ranking (id int, name text, subject text, score numeric);CREATE TABLEpostgres=# INSERT INTO score_ranking VALUES (1,'killerbee','数学',99.5), (2,'killerbee','语文',89.5),(3,'killerbee','英语',79.5), (4,'killerbee','物理',99.5), (5,'killerbee','化学',98.5),(6,'刘德华','数学',89.5), (7,'刘德华','语文',99.5), (8,'刘德华','英语',79.5),(9,'刘德华','物理',89.5), (10,'刘德华','化学',69.5),(11,'张学友','数学',89.5), (12,'张学友','语文',91.5), (13,'张学友','英语',92.5),(14,'张学友','物理',93.5), (15,'张学友','化学',94.5);INSERT 0 15//先查看下当前表的内容。postgres=# postgres=# select * from score_ranking ; id |   name    | subject | score ----+-----------+---------+-------  1 | killerbee | 数学    |  99.5  2 | killerbee | 语文    |  89.5  3 | killerbee | 英语    |  79.5  4 | killerbee | 物理    |  99.5  5 | killerbee | 化学    |  98.5  6 | 刘德华    | 数学    |  89.5  7 | 刘德华    | 语文    |  99.5  8 | 刘德华    | 英语    |  79.5  9 | 刘德华    | 物理    |  89.5 10 | 刘德华    | 化学    |  69.5 11 | 张学友    | 数学    |  89.5 12 | 张学友    | 语文    |  91.5 13 | 张学友    | 英语    |  92.5 14 | 张学友    | 物理    |  93.5 15 | 张学友    | 化学    |  94.5(15 rows)//以下就是 distict on 的用法://取出每门课程的第一名.postgres=# select distinct on (subject) id,name,subject,score from score_ranking order by subject,score desc;备注:逻辑是: 先依据subject进行分组,比如如果subject有五类,那就分成5组。其次,score desc决定每一组内部排序,最终决定每组取谁。 id |   name    | subject | score ----+-----------+---------+-------  5 | killerbee | 化学    |  98.5  1 | killerbee | 数学    |  99.5  4 | killerbee | 物理    |  99.5 13 | 张学友    | 英语    |  92.5  7 | 刘德华    | 语文    |  99.5(5 rows)//当没用指定ORDER BY子句的时候返回的记录是不确定的。postgres=# select distinct on (subject) id,name,subject,score from score_ranking ; id |   name    | subject | score ----+-----------+---------+-------  5 | killerbee | 化学    |  98.5  1 | killerbee | 数学    |  99.5  4 | killerbee | 物理    |  99.5 13 | 张学友    | 英语    |  92.5  2 | killerbee | 语文    |  89.5(5 rows)//by score,subject desc; 这里有固定格式,具体可以自己体会。 否则报错:postgres=# select distinct on (subject) id,name,subject,score from score_ranking order by score,subject desc;ERROR:  SELECT DISTINCT ON expressions must match initial ORDER BY expressionsLINE 1: select distinct on (subject) id,name,subject,score from scor...// distinct on (括号里也能跟两个参数)postgres=# select distinct on (id ,subject) id,name,subject,score from score_ranking order by id,subject,score desc; id |   name    | subject | score ----+-----------+---------+-------  1 | killerbee | 数学    |  99.5  2 | killerbee | 语文    |  89.5  3 | killerbee | 英语    |  79.5  4 | killerbee | 物理    |  99.5  5 | killerbee | 化学    |  98.5  6 | 刘德华    | 数学    |  89.5  7 | 刘德华    | 语文    |  99.5  8 | 刘德华    | 英语    |  79.5  9 | 刘德华    | 物理    |  89.5 10 | 刘德华    | 化学    |  69.5 11 | 张学友    | 数学    |  89.5 12 | 张学友    | 语文    |  91.5 13 | 张学友    | 英语    |  92.5 14 | 张学友    | 物理    |  93.5 15 | 张学友    | 化学    |  94.5(15 rows)

转载地址:http://rbowz.baihongyu.com/

你可能感兴趣的文章
ngrok内网穿透可以实现资源共享吗?快解析更加简洁
查看>>
NHibernate学习[1]
查看>>
NHibernate异常:No persister for的解决办法
查看>>
NIFI1.21.0_java.net.SocketException:_Too many open files 打开的文件太多_实际操作---大数据之Nifi工作笔记0051
查看>>
NIFI1.21.0_Mysql到Mysql增量CDC同步中_日期类型_以及null数据同步处理补充---大数据之Nifi工作笔记0057
查看>>
NIFI1.21.0_Mysql到Mysql增量CDC同步中_补充_更新时如果目标表中不存在记录就改为插入数据_Postgresql_Hbase也适用---大数据之Nifi工作笔记0059
查看>>
NIFI1.21.0_NIFI和hadoop蹦了_200G集群磁盘又满了_Jps看不到进程了_Unable to write in /tmp. Aborting----大数据之Nifi工作笔记0052
查看>>
NIFI1.21.0最新版本安装_连接phoenix_单机版_Https登录_什么都没改换了最新版本的NIFI可以连接了_气人_实现插入数据到Hbase_实际操作---大数据之Nifi工作笔记0050
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_增删改数据分发及删除数据实时同步_通过分页解决变更记录过大问题_02----大数据之Nifi工作笔记0054
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_插入修改删除增量数据实时同步_通过分页解决变更记录过大问题_01----大数据之Nifi工作笔记0053
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表或全表增量同步_实现指定整库同步_或指定数据表同步配置_04---大数据之Nifi工作笔记0056
查看>>
NIFI1.23.2_最新版_性能优化通用_技巧积累_使用NIFI表达式过滤表_随时更新---大数据之Nifi工作笔记0063
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_根据binlog实现数据实时delete同步_实际操作04---大数据之Nifi工作笔记0043
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置binlog_使用处理器抓取binlog数据_实际操作01---大数据之Nifi工作笔记0040
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_实现数据插入数据到目标数据库_实际操作03---大数据之Nifi工作笔记0042
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_生成插入Sql语句_实际操作02---大数据之Nifi工作笔记0041
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_03_来吧用NIFI实现_数据分页获取功能---大数据之Nifi工作笔记0038
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_不带分页处理_01_QueryDatabaseTable获取数据_原0036---大数据之Nifi工作笔记0064
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_无分页功能_02_转换数据_分割数据_提取JSON数据_替换拼接SQL_添加分页---大数据之Nifi工作笔记0037
查看>>
NIFI从PostGresql中离线读取数据再导入到MySql中_带有数据分页获取功能_不带分页不能用_NIFI资料太少了---大数据之Nifi工作笔记0039
查看>>