- 博客(19)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Starrocks join 优化
在StarRocks中，join操作是一种常见的数据处理方式，用于将多个表或数据集中的相关数据进行连接操作。对于大型join操作，可以考虑使用分段join的方式，将大join拆分为多个小join，以降低内存消耗和提高性能。对于大规模的join操作，可以考虑使用预计算的方式，提前将连接结果计算并存储起来，以减少实时join的开销。1.使用合理的分区策略，将数据分散到多个节点和磁盘上，以实现负载均衡和提高查询性能。对于经常被访问的数据，可以启用查询缓存，减少不必要的磁盘IO。
2023-11-04 17:44:47
257
1
原创 typescript 编写九九乘法表
由于刚开始学习typescript想写一个九九乘法表 但是ts里面我没找到不换行的输出就用了这种方法TypeScript 是 JavaScript 的超集,是可以兼容的,对于js 之前学过但是现在基本额上忘没了,哪位知道ts里面怎样引用js的工具集合怎样写代码可以分享一下..................
2022-08-31 17:49:54
445
1
原创 大数据hive 参数调优
复制于:tony~博客小屋夫学须静也,才须学也.非学无以广才,非志无以成学→_→_大数据：Hive常用参数调优1、limit限制调整一般情况下，Limit语句还是需要执行整个查询语句，然后再返回部分结果。有一个配置属性可以开启，避免这种情况—对数据源进行抽样hive.limit.optimize.enable=true — 开启对数据源进行采样的功能hive.limit.row.max.size — 设置最小的采样容量hive.limit.optimize.limit.file — 设置最大
2021-12-10 11:07:22
661
原创 azkaban.native.lib 问题全面解决方案
azkaban ExecutorManagerException: Running flow XXXX not found页面上报 Missing required property ‘azkaban.native.lib’或者Missing required property ‘azkaban.native.lib’ cause: null中间遇见错误的集中解决方案:报错内容 Stats for this flow execution are not available.这种一般是没有acti
2021-09-28 14:30:52
986
原创 idea运行Spark程序报错Failed to locate the winutils binary in the hadoop binary path解决方案
idea运行Spark程序报错Failed to locate the winutils binary in the hadoop binary path解决方案网上很多要下载hadoop包然后配置环境变量,这样很麻烦,下面是一个简单的一、 首先下载我准备的压缩包链接：https://pan.baidu.com/s/1KYt9l88k22FZZlbIZnylXw提取码：tajl二、解压...
2019-12-30 19:49:28
464
原创 AtomicInteger 中使用incrementAndGet()多线程计数
//从零开始 public static AtomicInteger race = new AtomicInteger(0); public static void increase() { //自增 race.incrementAndGet(); }
2019-09-20 18:26:04
1855
转载 GSON学习笔记
FastJson屡爆漏洞，或许你应该试试它？程序猿DD 1周前文章转载自公众号 闻人的技术博客 闻人的技术博客 ， 作者 闻人点击蓝色“程序猿DD”关注我回复“资源”获取独家整理的学习资料！前言这个周末被几个技术博主的同一篇公众号文章「预警」尽快升级FastJson版本，避免恶意请求导致OOM！ 刷屏，离之前的漏洞事件没多久，FastJson 又出现严重 Bug。目前项目中不少使用...
2019-09-20 18:20:36
236
原创 idea导入的包显示不可用,报错Cannot resolve symbol XXX 非常完美的解决方案
idea之前没问题,打开时候就报错,显示包不可用 报错 Cannot resolve symbol XXX重启,重新导报啥用也没有,到最后无意中发现一个简单方法就是**alt+回车 点add libary就行了很简单**...
2019-09-09 10:49:54
1538
1
原创 SimpleDateFormat线程不安全解决方案
private static final String date_format = "yyyy-MM-dd HH:mm:ss"; //获取SimpleDateFormat 从ThreadLocal中获取 private static ThreadLocal<DateFormat> threadLocal = new ThreadLocal<DateFormat>...
2019-08-29 11:49:28
123
原创 Flink 创建DataSet的几种方式
Flink 创建DataSet的几种方式package woaixuexiimport aa.MyClassimport org.apache.flink.api.scala._/** * @Author: 帅逼 * @Description: * @Date: Create in 20:36 2019/7/17 */object WoAiXueXi { de...
2019-07-17 23:28:43
1266
原创 java 操作hbase 卡住很长时间 不报错 有时候报找不到表
要把linux中/etc/hosts 中的配置全部复制过来 到本地的host文件中 就 ok了
2019-07-02 21:47:59
902
原创 java replace 替换(A)到(B)之间的字符
String s = " String regex = "A.*?B";//.*是任意字符 ?是任意个数 String ss = s.replaceAll(regex,",")
2019-06-27 14:34:10
1878
原创 java操作hbase
首先要生成table来操作hbase但是需要resource下面引入下面是代码package util;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableName;impo...
2019-06-27 14:30:32
95
原创 String类型的转int
public static int toInt(String s ) { int a = 0; try { Integer i = new Integer(s); a = i.intValue(); } catch (Exception e) { e.printStac...
2019-06-27 14:15:14
276
原创 java中的方法（函数）
/* 注意： * 1.函数的调用可以嵌套 函数的定义不可以嵌套 * 2.定义好的函数必须通过调用实现 * 3.面向过程中称为函数 面向对象中称为方法 * 4.创建函数的时候尽量保证每个函数尽量完成一个功能，强调功能的单一性 * 优点： * ...
2018-09-15 17:18:09
140
原创 循环（流程控制语句）
循环结构：三要素： 1.判断条件 2.结束条件 3.自增量的设置 for：do{ }while（）;whlie() {} label: for(xx;xx;xx){break label;}package com.qianfeng.test;public class Demo2 {/** * @param args */public static...
2018-09-15 17:15:48
166
原创 java运算符
运算符package com.qingfeng.test;public class demo5 { /* * 运算符： * a:功能来分 * 1.算数运算符 + - * / * 2.赋值运算符 = *= -= += %= * 3.关系运算符 < > &l...
2018-09-15 17:12:15
97
原创 Java基本数据类型 数据类型转换
数据类型（决定了变量在内存中所占空间的大小，并且确定了类型） 分类：有符号型(正数，0，负数)，无符号类型（0，正数） 有符号类型分为： 1.简单数据类型 数值类型 byte 1个字节 short 2个字节 int 4个字节 long 8个字节 浮点类型（科学计数法去表示的数） float （单精度型） 4个字节 ...
2018-09-15 17:10:42
112
原创 Java发展史
Java的名字的来源：Java是印度尼西亚爪哇岛的英文名称。 1991年4月，由James Gosling博士领导的绿色计划（Green Project）开始启动，此计划的目的是开发一种能够在各种消费性电子产品（如机顶盒、冰箱、收音机等）上运行的程序架构。这个计划的产品就是Java语言的前身：Oak（橡树）。最初这个为TV机顶盒所设计的语言在Sun内部一直称为Green项目。我们的新语言需...
2018-09-15 16:50:10
1754
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人