- 博客(3)
- 收藏
- 关注
RSS订阅转载 presto 基本优化
在默认情况下，presto使用distributed hash join算法，在这种算法中，join左右两边的表都会根据join键的值进行分区。左表的每个分区都会被通过网络传入到右表所在 分区的worker节点上。也就是说，在进行join关联的时候，会先把右表的所有分区全部分布到各个计算节点上保存，然后等待将左表中的各个分区依次通过网络传输stream 到相应的计算节点上进行计算。由于右表的所有分区需要全部分布到各个节点上进行存储，所以有一个限制：就是集群中所有内存的大小一定要大于右表的大小。...
2022-08-05 10:32:44
691
转载 Shell test 单中括号[] 双中括号[[]] 的区别
使用[[...]]条件判断结构，而不是[...]，能够防止脚本中的许多逻辑错误。比如，&&、||、操作符能够正常存在于[[]]条件判断结构中，但是如果出现在[]结构中的话，会报错。比如可以直接使用if[[$a!=1&&$a!=2]]如果不使用双括号,则为if[$a-ne1]&&[$a!=2]或者if[$a-ne1-a$a!=2]bash把双中括号中的表达式看作一个单独的元素，并返回一个退出状态码。$[!-bash[False。...
2022-08-02 01:09:48
279
转载 SQL的日期函数
日期函数 日期函数 在DBMS中日期和时间值以特殊的格式存储，以便能快速和有效地排序或过滤。常见的日期数据格式有两种：'yyyy-MM-dd' 和 'yyyyMMdd'。 时间戳-日期格式转化 时间戳是数据库中自动生成的唯一二进制数字，表明数据库中数据修改发生的相对顺序，其记录形式类似：1627963699 ，在实际工作环境中，对于用户行为发生的时间通常都是用时间戳进行记录，时间戳和日期格式之间可以利用from_unixtime和 unix_timestamp进行转换。 from_unixti
2022-01-23 23:09:14
529
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人