【MySQL 8.0新特性】窗口函数

2023/9/30 16:53:37

文章目录

  • 1. 窗口函数概述
  • 2. 序号函数
  • 3. 分布函数
  • 4. 前后函数
  • 5. 头尾函数
  • 6. 其他函数

1. 窗口函数概述

什么是窗口函数?

窗口函数是MySQL8.0新增的,窗口函数又称开窗函数,属于MySQL的一大特点。

非聚合窗口函数是相对于聚函数来说的。聚合函数是对一组数据计算后返回单个值(即分组),非聚合函数一次只会处理一行数据。窗口聚合函数在行记录上计算某个字段的结果时,可将窗口范围内的数据输入到聚合函数中,并不改变行数

image-20221114205402934

窗口函数有什么用?

窗口函数可以对数据库数据进行实时分析处理,比如市场分析、创建财务报表、创建计划等日常性商务工作。

窗口函数分为哪几种?

窗口函数分为以下几种:

  1. 序号函数
    • ROW_NUMBER() —— 排序:1,2,3
    • RANK0 —— 排序: 11,3
    • DENSE_RANK() —— 排序: 1,1,2
  2. 分布函数
    • PERCENT_RANK() —— (rank-1) /(rows-1)
    • CUME_DIST() —— <=当前rank值的行数/总行数
  3. 前后函数
    • LAG (expr,n) —— 返回当前行的前n行的expr的值
    • LEAD (expr,n) —— 返回当前行的后n行的expr的值
  4. 头尾函数
    • FIRST_VALUE(expr) —— 返回第一个expr的值
    • LAST_VALUE (expr) —— 返回最后一个expr的值
  5. 其他函数
    • NTH_VALUE (expr,n) —— 返回第n个expr的值
    • NTILE (n) —— 将有序数据分为n个桶,记录等级数

image-20221114210039308

窗口函数的基本用法是怎么样的?

<窗口函数> OVER ( [PARTITION BY <列清单>] ORDER BY <排序用列清单>)

over关键字用来指定函数执行的窗口范围,若后面括号中什么都不写,则意味着窗口包含满足WHERE条件的所有行,窗口函数基于所有行进行计算;如果不为空,则支持以下4中语法来设置窗口。

  1. window_name:给窗口指定一个别名。如果SQL中涉及的窗口较多,采用别名可以看起来更清晰易读

  2. partition by子句:窗口按照哪些字段进行分组,窗口函数在不同的分组上分别执行,**它的作用类似于GROUP BY分组。**如果省略了 PARTITION BY,所有的数据作为一个组进行计算

  3. order by子句:按照哪些字段进行排序,窗口函数将按照排序后的记录顺序进行编号

  4. frame子句:frame是当前分区的一个子集,子句用来定义子集的规则,通常用来作为滑动窗口使用


2. 序号函数

序号函数有三个,分别是ROW_NUMBER()、RANK()、DENSE_RANK(),可以用来实现分组排序,并添加序号

格式如下

row_number()|rank()|dense_rank() over ( 
  partition by ... 
  order by ... 
) 

这里分别使用三种序号函数进行查询

-- 对每个部门的员工按照薪资排序,并给出排名
select 
dname,
ename,
salary,
row_number() over(partition by dname order by salary desc) as rn 
from employee;

image-20221114210652772

-- 对每个部门的员工按照薪资排序,并给出排名 rank
select 
dname,
ename,
salary,
rank() over(partition by dname order by salary desc) as rn 
from employee;

image-20221114210709242

-- 对每个部门的员工按照薪资排序,并给出排名 dense-rank
select 
dname,
ename,
salary,
dense_rank() over(partition by dname order by salary desc) as rn 
from employee;

image-20221114210724380

观察上面各个序号函数的区别是什么?

  1. ROW_NUMBER():顺序排序——1、2、3
  2. RANK():并列排序,跳过重复序号——1、1、3
  3. DENSE_RANK():并列排序,不跳过重复序号——1、1、2

3. 分布函数

分布函数包括PERCENT_RANK()和CUME_DIST()

1)PERCENT_RANK()函数将某个数值在数据集中的排位作为数据集的百分比值返回,此处的百分比值的范围为 0 到 1

  • 用途:每行按照公式(rank-1) / (rows-1)进行计算。其中,rank为RANK()函数产生的序号,rows为当前窗口的记录总行数
  • 应用场景:不常用
select 
 dname,
 ename,
 salary,
 rank() over(partition by dname order by salary desc ) as rn,
 percent_rank() over(partition by dname order by salary desc ) as rn2
from employee;

image-20221114211650330

2) CUME_DIST

  • 用途:分组内小于、等于当前rank值的行数 / 分组内总行数
  • 应用场景:查询小于等于当前薪资(salary)的比例
select  
 dname,
 ename,
 salary,
 cume_dist() over(order by salary) as rn1, -- 没有partition语句 所有的数据位于一组
 cume_dist() over(partition by dname order by salary) as rn2 
from employee;

image-20221114212006869

这里需要解释一下,就rn1而言

首先组共12个人(因为没有partition语句 所有的数据位于一组),刘备这行数据对应的rn1是0.25

大于等于3000的数据共有3条,因此是3/12=0.25


4. 前后函数

前后函数有LAG (expr,n)和LEAD (expr n)。

Lag()和Lead()分析函数可以在同一次查询中取出同一字段的前N行的数据(Lag)和后N行的数据(Lead)作为独立的列。

在实际应用当中,若要用到取今天和昨天的某字段差值时,Lag()和Lead()函数的应用就显得尤为重要。当然,这种操作可以用表的自连接实现,但是LAG()和LEAD()与left join、rightjoin等自连接相比,效率更高,SQL更简洁。

  • 用途:返回位于当前行的前n行(LAG(expr,n))或后n行(LEAD(expr,n))的expr的值。
  • 应用场景:查询前1名同学的成绩和当前同学成绩的差值。
/*
last_1_time: 指定了往上第1行的值,default为'2000-01-01'  
                         第一行,往上1行为null,因此取默认值 '2000-01-01'
                         第二行,往上1行值为第一行值,2021-11-01 
                         第三行,往上1行值为第二行值,2021-11-02 
last_2_time: 指定了往上第2行的值,为指定默认值
                         第一行,往上2行为null
                         第二行,往上2行为null
                         第四行,往上2行为第二行值,2021-11-01 
                         第七行,往上2行为第五行值,2021-11-02 
*/

-- lag的用法
select 
 dname,
 ename,
 hiredate,
 salary,
 lag(hiredate,1,'2000-01-01') over(partition by dname order by hiredate) as last_1_time,
 lag(hiredate,2) over(partition by dname order by hiredate) as last_2_time 
from employee;

image-20221114213451836

-- lead的用法
select 
 dname,
 ename,
 hiredate,
 salary,
 lead(hiredate,1,'2000-01-01') over(partition by dname order by hiredate) as last_1_time,
 lead(hiredate,2) over(partition by dname order by hiredate) as last_2_time 
from employee;

image-20221114213602078


5. 头尾函数

头尾函数包括:LAST_VALUE (expr)与FIRST_VALUE(expr)

  • 返回第一个expr的值:FIRST_VALUE(expr)

  • 返回最后一个expr的值:LAST_VALUE(expr)

  • 用途:返回第一个(FIRST_VALUE(expr))或最后一个(LAST_VALUE(expr))expr的值

  • 应用场景:截止到当前,按照日期排序查询第1个入职和最后1个入职员工的薪资

-- 注意,  如果不指定ORDER BY,则进行排序混乱,会出现错误的结果
select
  dname,
  ename,
  hiredate,
  salary,
  first_value(salary) over(partition by dname order by hiredate) as first,
  last_value(salary) over(partition by dname order by  hiredate) as last 
from  employee;

image-20221114213854860


6. 其他函数

其他函数包括NTH_VALUE (expr,n)与NTILE (n)

  • NTH_VALUE (expr,n) —— 返回第n个expr的值

  • NTILE (n) —— 将有序数据分为n个桶,记录等级数

  • 用途:将分区中的有序数据分为n个等级,记录等级数

  • 应用场景:将每个部门员工按照入职日期分成3组

-- 根据入职日期将每个部门的员工分成3组
select 
  dname,
  ename,
  hiredate,
  salary,
ntile(3) over(partition by dname order by  hiredate  ) as rn 
from employee;

image-20221114214144571

-- 取出每个部门的第一组员工
select
*
from
(
    SELECT 
        dname,
        ename,
        hiredate,
        salary,
    NTILE(3) OVER(PARTITION BY dname ORDER BY  hiredate  ) AS rn 
    FROM employee
)t
where t.rn = 1;

image-20221114214226789


参考:

  • 2022新版黑马程序员MySQL知识精讲+mysql实战案例_零基础mysql数据库入门到高级全套教程
  • MYSQL常见面试题之——窗口函数_web3纪元的博客-CSDN博客_窗口函数
  • MySQL/Hive 常用窗口函数详解及相关面试题_TRX1024的博客-CSDN博客

http://www.jnnr.cn/a/129386.html

相关文章

认识计算机中寄存器的本质

字节 为了能够表示比简单的是/否更重要的内容&#xff0c;计算机中做的是将8个比特堆在一起当做一个单元使用&#xff0c;如下图表展示了8个比特的内存。每个内存比特有自己数据的输入‘i’和‘o’, 我们使用一个‘s’把这8个比特连接在一起&#xff0c;因此当‘s’打开时候&am…

2022年认证杯SPSSPRO杯数学建模B题(第二阶段)唐宋诗的定量分析与比较研究求解全过程文档及程序

2022年认证杯SPSSPRO杯数学建模 B题 唐宋诗的定量分析与比较研究 原题再现&#xff1a; 唐诗和宋诗在文学风格上有较为明显的区别&#xff0c;这一点在古代文学研究中早有定论。所以唐诗和宋诗有时甚至会直接指代两类不同的诗作风格。历史学家缪钺在《论宋诗》一文中说&#…

【QT配置第三方MQTT协议】

QT配置第三方MQTT协议一.下载第三方的mqtt库来实现mqtt通信二.将MQTT部署到Qt项目&#xff08;将mqtt的库直接部署到Qt的安装目录&#xff0c;这样就只需部署一次&#xff0c;以后在任何工程中引用mqtt都不需要导入外部库了&#xff09;三.将mqtt加入Qt模块四.测试一.下载第三方…

漫谈云数据中心的前世今生

随着技术的不断发展&#xff0c;数据中心的重要性与日俱增。创新是相互依存的&#xff0c;需要不断增加的计算能力。此外&#xff0c;物联网&#xff08;IoT&#xff09;和云计算也在推动传统数据中心的技术完成更迭。 在数字化浪潮中&#xff0c;传统IT也面临巨大的挑战&#…

链表——算法专项刷题(四)

四、链表 链表常用算法及思想&#xff1a;快慢指针、哈希表 注意点&#xff1a;注意链表的边界情况&#xff0c;如头结点 4.1删除链表的倒数第n个结点 原题链接 给定一个链表&#xff0c;删除链表的倒数第 n 个结点&#xff0c;并且返回链表的头结点。 输入&#xff1a;h…

原地算法(数组向)

一.原地算法简单介绍 1.案例引入 生命游戏 &#xff0c;简称为 生命 &#xff0c;是英国数学家约翰何顿康威在 1970 年发明的细胞自动机。 给定一个包含 m n 个格子的面板&#xff0c;每一个格子都可以看成是一个细胞。每个细胞都具有一个初始状态&#xff1a; 1 即为 活细…

快速写论文

科研论文的关键的体现在于将所得结果详实记录并进行科学分析后&#xff0c;总结成果写成论文由同行评议认可后发表。 科研的完整过程 那么如何在4-6个月内产出论文呢&#xff0c;这次我和一些担任AAAI&#xff0c;ACL&#xff0c;EMNLP等多个会议期刊的审稿人聊了聊&#xff0c…

Android 圆形CheckBox勾选

Android 圆形CheckBox勾选&#xff0c;RadioButton样式前沿上代码RadioButton样式CheckBox 自定义勾选说明效果图前沿 Android几种方式(style、selector)实现圆形的CheckBox,android checkbox圆形按钮样式,Android简单实现圆形CheckBox,Android CheckBox圆形复选框 这里不重写…

Java基础—Document类型的变化

Document类型的变化 Document类型的变化中唯一与命名空间无关的方法是importNode()。这个方法的用途是从一个文档中取得一个节点&#xff0c;然后将其导入到另一个文档&#xff0c;使其成为这个文档结构的一部分。需要注意的是&#xff0c;每个节点都有一个ownerDocument属性&…

rsync实现windows和windows之间的数据同步

一&#xff1a;环境 1、同步对象&#xff1a;测试数据 2、服务端&#xff1a;Windows Server 2008 R2 3、客户端&#xff1a;Windows7 旗舰版64位 4、服务端rsync版本&#xff1a;cwRsyncServer_4.1.0_Installer.exe 5、rsync客户端和服务端下载链接 链接: https://pan.baidu.…

MySQL 之 InnoDB存储引擎(二)

三 事务原理 3.1 事务基础 事务是MySQL区别于NoSQL的重要特征&#xff0c;是保证关系型数据库数据一致性的关键技术。事务可看作是对数据库操作的基本执行单元&#xff0c;可能包含一个或者多个SQL语句。这些语句在执行时&#xff0c;要么都执行&#xff0c;要么都不执行。MyS…

Vue中如何完成对axios的二次封装、统一接口管理

当项目接口数量很多的情况下、如何维护这些接口成了一个问题?如何做到对aixos的二次封装、简化发送请求的过程?如何做到统一管理这些接口? 文章目录 目录结构手动创建api这个包1、创建request.js2、创建index.js3、在main.js中引入封装好的axios4、如何在项目中发送请求5、后…

git 合并两个不同仓库

在日常开发过程中&#xff0c;可能会遇到需要将两个不同的仓库合并成到一个仓库的场景。 这里介绍一下怎么将两个不同的仓库合并到一个仓库中。 合并两个不同仓库 思路&#xff1a;添加两个远程仓库&#xff0c;将两个代码作为两个分支&#xff0c;然后手动合并。 譬如想将 …

泛型编程与模板

C模板 文章目录C模板1.泛型编程1.1 泛型编程与模板2.函数模板2.1 函数模板概念2.2 函数模板格式2.3 函数模板原理2.4 函数模板实例化2.5 函数模板参数匹配原则3.类模板3.1 类模板概念3.2 类模板的定义格式3.3 类模板的实例化4.非类型模板参数5.模板特化5.1 模板特化的概念5.2 函…

代码质量、重构、可测试性、解耦杂谈

文章目录如何发现代码质量问题&#xff1f;如何才能写出高质量的代码&#xff1f;重构的目的&#xff1a;为什么重构&#xff08;why&#xff09;&#xff1f;重构的对象&#xff1a;重构什么&#xff08;what&#xff09;&#xff1f;重构的时机&#xff1a;什么时候重构&…

mmrotate学习(4):mmrotate框架训练数据集

搭建环境 制作数据集 开始训练 主要是修改参数 1.修改tools/tain.py 两个主要的参数&#xff1a; 1&#xff09;config: 使用的模型文件&#xff1b; 2&#xff09;work-dir&#xff1a;训练得到的模型及配置信息保存的路径&#xff1b; 2.修改选用的config模型文件的参数…

PLC维护有何难处?如何实现远程维护?

“正经人谁干PLC啊&#xff1f;”在跟朋友聊天时他突然冒出这样一句话。 朋友读的正经一本&#xff0c;毕业就入了PLC行业&#xff0c;干的是PLC编程维护&#xff0c;做了一年多突然说想转行了&#xff0c;就跟他聊了聊。 总的来说&#xff0c;正常上班并不是很累&#xff0c…

【附源码】Python计算机毕业设计网上购物系统

项目运行 环境配置&#xff1a; Pychram社区版 python3.7.7 Mysql5.7 HBuilderXlist pipNavicat11Djangonodejs。 项目技术&#xff1a; django python Vue 等等组成&#xff0c;B/S模式 pychram管理等等。 环境需要 1.运行环境&#xff1a;最好是python3.7.7&#xff0c;…

DPDK 网络加速在 NFV 中的应用

目录 文章目录 目录前文列表传统内核协议栈的数据转发性能瓶颈是什么&#xff1f;DPDKDPDK 基本技术 DPDK 架构DPDK 核心组件应用 NUMA 亲和性技术减少跨 NUMA 内存访问应用 CPU 绑核技术减少上下文切换损耗应用大页内存技术减少 TLB miss应用 PMD 轮询技术减少网卡外设的硬件…

win11安装anaconda, tenserflow gpu 版本 ,cuda toolkit ,cudnn

由于是使用gpu的tensorflow 首先要对应上版本&#xff0c;不是最新的最好&#xff0c;记得版本匹配 驱动可以安装最新的&#xff0c;但是cuda版本和cudnn要根据要安装的tensorflow-gpu对应的版本来配置&#xff0c; 比如我要用的1.15.2的版本对应的是cuda10.0.0一定不要安装高…
最新文章