orderBy和sort

最新推荐文章于 2023-07-09 12:32:33 发布
最新推荐文章于 2023-07-09 12:32:33 发布
阅读量1k 收藏
点赞数
分类专栏： Spark
原文链接：jianshu.com/p/056c51c90a39
版权

orderBy和sort：按指定字段排序，默认为升序 ，例如，按照时间字段进行排序:

df.orderBy("visittime").show(false)

输出：
+---+----+----+---------------------+
|id |user|type|visittime            |
+---+----+----+---------------------+
|12 |1   |助手2 |2017-07-07 13:45:08.0|
|10 |2   |助手1 |2017-07-14 13:44:57.0|
|11 |1   |APP1|2017-07-15 13:45:03.0|
|6  |3   |APP1|2017-08-01 13:44:41.0|
|5  |3   |APP1|2017-08-02 13:44:38.0|
|8  |3   |APP2|2017-08-03 13:44:45.0|
|2  |1   |APP1|2017-08-04 13:44:26.0|
|3  |2   |助手1 |2017-08-05 13:44:29.0|
|4  |2   |助手1 |2017-08-07 13:44:32.0|
|1  |1   |助手1 |2017-08-10 13:44:19.0|
|9  |2   |APP2|2017-08-11 13:44:53.0|
|7  |3   |助手2 |2017-08-14 13:44:48.0|
+---+----+----+---------------------+

如果想要降序排序，可以使用如下的方法：

df.orderBy(df("visittime").desc).show(false)


输出：
+---+----+----+---------------------+
|id |user|type|visittime            |
+---+----+----+---------------------+
|7  |3   |助手2 |2017-08-14 13:44:48.0|
|9  |2   |APP2|2017-08-11 13:44:53.0|
|1  |1   |助手1 |2017-08-10 13:44:19.0|
|4  |2   |助手1 |2017-08-07 13:44:32.0|
|3  |2   |助手1 |2017-08-05 13:44:29.0|
|2  |1   |APP1|2017-08-04 13:44:26.0|
|8  |3   |APP2|2017-08-03 13:44:45.0|
|5  |3   |APP1|2017-08-02 13:44:38.0|
|6  |3   |APP1|2017-08-01 13:44:41.0|
|11 |1   |APP1|2017-07-15 13:45:03.0|
|10 |2   |助手1 |2017-07-14 13:44:57.0|
|12 |1   |助手2 |2017-07-07 13:45:08.0|
+---+----+----+---------------------+

 

冽夫
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive拉拉扯扯的order by,sort by,distribute by, cluster by
01-07
Hive支持两个层面的排序： 全局排序 部分排序 全局排序用 order by col [ASC | DESC] 实现，效果和传统的RDMS一样，保证最后的数据全局有序。 部分排序用 sort by col [ASC | DESC] 实现，保证同一个reducer处理的数据有序，对于结果数据则表现为局部有序。 Hive对用户提供的同样是SQL，但底层实现却和传统数据库有天壤区别，底层实现默默情况下是利用了Hadoop的计算框架MapReduce，当然也支持使用Spark, Tez。鉴于此，Hive有一些自己特定，比如order by的实现需要把所有数据汇集到一个reducer中处理，如果数
Linq OrderBy
09-24
Dynamic Linq SortBy
【mysql知识点整理】— order by 、group by 出现Using filesort原因详解
12-14
文章目录测试数据1 sql执行顺序2 order by 和 group by什么时候会出现Using filesort — 理论3 order by 和 group by什么时候会出现Using filesort — 实践3.1 不会出现 Using filesort的情况 — 符合最佳左前缀法则3.1.1 order by也满足索引最佳左前缀法则的时候3.1.2 where中索引的最左前缀定义为常量的时候 — 其实为3.1.1的特例3.1.3 覆盖索引情况下和非覆盖索引情况下稍微有点区别3.2 会出现 Using filesort的情况3 讨论 — 实际业务中我的order by 就
MySQL order by性能优化方法实例
01-19
前言 工作过程中,各种业务需求在访问数据库的时候要求有order by排序。有时候不必要的或者不合理的排序操作很可能导致数据库系统崩溃。如何处理好order by排序呢？本文从原理以及优化层面介绍 order by 。 一 MySQL中order by的原理   1 利用索引的有序性获取有序数据   当查询语句的 order BY 条件和查询的执行计划中所利用的 Index 的索引键（或前面几个索引键）完全一致,且索引访问方式为 rang,ref 或者 index 的时候,MySQL 可以利用索引顺序而直接取得已经排好序的数据。这种方式的 order BY 基本上可以说是最优的排序方式了,因为
oracle-sort-order-by.rar_oracle_sort - order
09-24
oracle数据库的日文排序机制解析，对日外包软件开发经常会用到
order by和sort by的区别
weixin_46300771的博客
01-01 5140
在hive里面关于order by和sort by的区别。以及sort by在多reduce情况下的排序结果
orderby和sort的区别
最新发布
unicornff的博客
07-09 286
我们可以将它们视为不同的排序工具，而不是将一个视为高级或低级。表示要进行比较的两个元素，而 lambda 表达式的返回值表示比较的结果。操作符通常与其他 LINQ 查询操作符一起使用，可以方便地构建复杂的查询表达式。方法可以使用 lambda 表达式来提供自定义的排序逻辑，修改默认的比较方式。方法可以与 lambda 表达式结合使用，以提供自定义的排序逻辑。方法是一个列表的实例方法，不直接与 LINQ 查询一起使用。它适用于对集合本身进行排序，不返回新的序列。创建新的已排序序列，而不改变原始集合的顺序。
mybatis动态传入order by(排序字段) 和 sort(排序方式) 防止注入
yump的博客笔记
09-29 2万+
mybatis动态传入order by(排序字段) 和 sort(排序方式) 只能使用KaTeX parse error: Expected 'EOF', got '#' at position 8: {}传参方式，#̲{}传参无效。但众所周知使用{}传参会有SQL注入问题，上网查了一下很多都说鱼与熊掌不可兼得，接下来介绍一下如何使用动态传参且能够防止注入的方法。 一、mybatis的两种传参方式#{}和${} 1. #传参 1.1 # 是通过prepareStatement的预编译的，会对自动传入的数据加
【数据处理】 python 常用操作整理
乐川大佛的博客
11-05 778
这是本人在数据分析中，记不住，反复查询的一些命令汇总，在此做个归纳汇总，并不定期更新。
4种排序方式比较：order by, sort by, distribute by, cluster by
CharlesCFA的博客
02-21 6411
文章记录了4种排序方式：order by, sort by, distribute by, cluster by 总结： order by 全局排序，只有一个 Reducer，通过order对字段进行降序或者升序 sort by 对于大规模的数据集 order by 的效率非常低。在很多情况下，并不需要全局排序，此时可以使用 sort by。Sort by 为每个reducer 产生一个排序文件。每个 Reducer 内部进行排序，对全局结果集来说不是排序。 distribute by 在有些情
准备Java面试？聊聊MySQL主从复制的几种复制方式，附大厂真题面经
m0_56067448的博客
03-17 802
前言 Redis作为基于键值对的NoSQL数据库，具有高性能、丰富的数据结构、持久化、高可用、分布式等特性，同时Redis本身非常稳定，已经得到业界的广泛认可和使用。因此，作为一个Java开发者，掌握Redis早就成了一项必备技能之一。 今天，想跟大家分享这份腾讯Redis压轴笔记，关注到了Redis开发方方面面，尤其是对于开发中如何提高效率，减少可能遇到的问题进行详细分析，不单单介绍怎么解决这些问题，而是通过对Redis重要原理的解析，帮助开发人员学会找到问题的方法，理解背后的原理，从而让开发人员不仅知其
order by、sort by、distribute by和cluster by 的区别,使用场景
LiuYangCSND的博客
06-22 1845
Hive会将数据按照指定的列进行划分和排序，每个划分内的数据是有序的，但不同划分之间的顺序是未定义的。它类似于distribute by，但它会尝试将数据按照指定的列进行排序，并将相邻的值放置在相同的分区中。在Hive中，order by、sort by、distribute by和cluster by是用于数据排序和分区的关键字，它们在语义和使用场景上有一些区别。使用场景：当需要将数据按照指定的列进行分区和排序，并且希望相邻值在同一分区中时，可以使用cluster by。
Hive中的排序及优化 ORDER BY, SORT BY, DISTRIBUTE BY, CLUSTER BY
Mr.pan felix的专栏
08-09 2409
Hive 提供了多重排序语句，我们这里对这几种排序方法做一解析，并进行测试 编排如下: 试验场景 Hive 中的 ORDER BY 与其不足 Hive 中的 SORT BY，DISTRIBUTE BY Hive 中的CLUSTER BY 与其不足 完成相同功能的Job 执行时长对比 实验场景： 我们创建了一个按天分区的分区表，将数据按天分区。 CREATE EXTERNAL TABLE `clickcube_mid`( `logtyp...
Order By与Sort
梦笔生花的专栏
01-03 1902
在做程序优化的时候：        因为order by 命令是在数据库服务器上执行的，而 sort 语句是在应用服务器上执行的。所以，与其在select语句中使用order by命令，不如将数据先读取到内表中然后使用sort命令来将结果排序，这样应用服务器上的执行速度要比数据库服务器快。
List排序Sort和OrderBy方法（C#）
热门推荐
weixin_46433786的博客
11-15 3万+
Sort和OrderBy的定义比较 1、List.Sort（）排序： Sort并不是简单的快速排序，它对普通的快速排序进行了优化，此外，它还结合了插入排序和堆排序。系统会根据你的数据形式和数据量自动选择合适的排序方法，这并不是说它每次排序只选择一种方法，它是在一次完整排序中不同的情况选用不同方法，比如给一个数据量较大的数组排序，开始采用快速排序，分段递归，分段之后每一段的数据量达到一个较小值后它就不继续往下递归，而是选择插入排序，如果递归的太深，他会选择堆排序。 说明： 　　a. 使用Sort排序时，有可能
spark dataframe降序排序
别说话写代码的博客
03-17 2169
package com.dkl.leanring.spark.df import org.apache.spark.sql.SparkSession object DfSortDesc { def main(args: Array[String]): Unit = { val spark = SparkSession.builder().appName("DfSortDesc").master("local").getOrCreate() val data = Array((7,.
mysql查询默认排序规则_深究 mysql 默认排序， order by 的顺序【收藏】
weixin_39948309的博客
11-28 1607
mysql 语句中如果没有使用 order by 来排序，通常会用 主键正序排列，但是有的时候不是这样，来看一个实例。实例群友问：请教一个问题，mysql 默认排序问题，当sql 语句 的排序没有指定 主键（id）的时候是按着什么规则排序的呢？这个 sql 语句 当 hit_count = 0 和 uptime = 0 时 的数据和 跟 limit_count 变化根据 id 来看，当 uptim...
mybatis中orderBy(排序字段)和sort(排序方式)引起的bug
意田天的博客
07-23 1万+
引言: 记录一个mybatis实现动态字段的排序和动态的升降序问题 实现效果如下: 1. 问题叙述: 在这里无论使用postman是否传递sort的值, 都不生效, postman 执行的sql日志 ==> Preparing: select sum(acd.read_view_count) as read_view_count,sum(acd.read_person_count) as read_person_count, sum(acd.like_count) as like_count,
order by和sort by区别
03-16
order by和sort by都是用于对查询结果进行排序的关键字，但是在不同的数据库系统中可能有不同的用法和语法。 一般来说，order by是SQL语句中用于对查询结果进行排序的关键字，它可以按照指定的列或表达式进行升序或降序排序。例如，以下SQL语句将按照age列进行升序排序： SELECT * FROM users ORDER BY age ASC; 而sort by则是一些数据库系统中特有的关键字，例如Hive和Pig中都有sort by关键字。它们通常用于对数据进行排序和分组，可以按照指定的列或表达式进行排序，也可以指定升序或降序排序。例如，以下Hive语句将按照age列进行降序排序： SELECT * FROM users SORT BY age DESC; 总的来说，order by和sort by都是用于对查询结果进行排序的关键字，但是具体的用法和语法可能因数据库系统而异。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值