自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

阿年的博客

当你的才华还撑不起你的野心时,就应该静下心来学习;当你的能力还驾驭不了你的目标时,就应该沉下心来历练。梦想不是浮躁,而是沉淀和积累。

  • 博客(160)
  • 资源 (15)
  • 收藏
  • 关注

原创 Scala集合常用函数 - 高级计算函数

Scala集合常用的高级计算函数,过滤、转换/映射、扁平化、扁平化映射、分组、简化/规约、折叠,将两个map合并

2023-07-18 10:20:42 1483 2

原创 从源码理解Scala中函数reduceRight的计算过程

函数reduceRight()到底是怎么算的?它的实现是什么?带你阅读源码,了解下

2023-07-18 09:55:47 515

原创 Scala集合常用函数 - 衍生集合

Scala集合中常用的函数,衍生集合,也就是通过一个集合的操作,转换为另外一个集合。获取集合的头、集合的尾、集合的最后一个元素、初始元素、集合反转、取前(后)n个元素、删除前(后)n个元素、集合的并集、交集、差集,拉链以及滑窗

2023-07-15 10:06:30 904

原创 Scala集合常用函数 - 初级计算函数

Scala集合总常用的初级计算函数,求和、求乘积、最大值、最小值、三种排序方式

2023-07-15 09:53:54 913

原创 Scala集合 - Map;扩展元组类型

可变和不可变Map集合的创建、添加元素,删除元素,遍历,修改元素;扩展元组类型,以及用元组创建Map

2023-07-14 09:58:01 902

原创 Scala集合 - Set

不可变Set集合、可变Set集合的创建,元素添加删除,遍历集合

2023-07-14 09:39:47 1435

原创 Scala集合 - List

可变和不可变List的创建、访问、添加元素、遍历以及扩展的扁平化处理

2023-07-13 11:15:19 2814

原创 Scala集合 - 可变数组

可变数组的创建,访问元素、遍历、添加元素、删除元素、可变和不可变数组的转换操作,操作示例

2023-07-13 09:39:39 934

原创 Scala集合 - 不可变数组

Scala中数组的创建、遍历、元素的赋值及遍历操作,案例实操

2023-07-12 16:10:19 855

原创 Scala中的集合

Scala中的集合包含哪些内容,各个集合间的继承关系。从概念上认识Scala集合

2023-07-12 16:00:38 725

原创 数据库的并发控制 - 两段锁协议和三级封锁协议

数据库的并发控制 - 两段锁协议和三级封锁协议

2023-06-06 10:00:00 5376

原创 Flume自定义拦截器 - ETL拦截器和分类拦截器

深刻的理解了Flume中的拦截器和选择器,以及Source Selector、Channel Selector。自定义拦截器的步骤,并编程实现了一个自定义的拦截器,来进行日志过滤,选择,以及发送到不同的Kafka topic中

2023-06-05 14:00:56 1502

原创 Directory hdfs://hadoop101:8020/warehouse/xxx/dt=2021-01-03 could not be cleaned up.

向Hive分区表中load数据报错:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Directory hdfs://hadoop101:8020/warehouse/gmall/ods/ods_order_info/dt=2021-01-03 could not be cleaned up.可能是手动删除数据导致元数据没有被删除,所以再次load数据报错,解决办法是将表删除再重新创建

2023-06-03 20:21:55 575

原创 keytool 错误: java.lang.Exception: 未生成密钥对, 别名 <jetty> 已经存在

keytool 错误: java.lang.Exception: 未生成密钥对, 别名 已经存在,已解决

2023-06-03 19:53:10 2627

原创 MySQL中的业务数据该如何正确导入到Hive中 - Sqoop

业务系统中的数据如何导入到HDFS系统中,并加载到Hive数仓中

2023-06-02 22:12:32 2702

原创 HBase集群搭建

hbase

2023-05-30 22:55:16 761

原创 HQL - 用户注册、登录、下单综合统计

year()函数的使用 - 获取日期的年份

2023-05-08 20:54:37 202

原创 HQL - 查询销售件数高于品类平均数的商品

cast(a as int ),hive中数据类型的转换

2023-05-07 20:50:50 228

原创 HQL- 统计每个商品的销量最高的日期

先以sku_id和create_date分组,然后求sum(sku_num),求出一天的销量然后以销量倒序排序,进行编号,取最高的,也就是目标行。

2023-05-05 14:01:38 296 1

原创 HQL - 查询每天的新增用户数

date_format()、substring()函数切割时间,求每日新增用户数的思路

2023-05-04 22:24:51 385

原创 HQL - 筛选去年总销量小于100的商品

substring()、date_add()、datediff()

2023-05-03 14:19:58 157

原创 HQL - 每个商品销售首年的年份、销售数量和销售金额

substring()、dense_rank()、over()

2023-05-02 11:19:39 204

原创 HQL - 查询首次下单后第二天连续下单的用户比率

lead()、date()、datediff()、concat()函数的使用,嵌套子查询的优化with a as()

2023-05-01 16:26:02 779 1

原创 【HQL - 查询用户的累计消费金额及VIP等级】

查询用户的累计消费金额及VIP等级,rows between unbounded preceding and current row;case when 分类

2023-04-30 13:45:36 1482 1

原创 前端埋点采集到的数据怎么发送到服务端?

前端埋点采集到的数据怎么发送到服务端?1. Image请求2. Ajax请求3. web socket 连接

2023-04-29 18:06:07 1992

原创 【HQL - 查询各品类销售商品的种类数及销量最高的商品】

查询各品类销售商品的种类数及销量最高的商品

2023-04-29 15:20:22 665

原创 【HQL - 查询至少连续三天下单的用户】

查询至少连续三天下单的用户,date_sub()、row_number()

2023-04-28 17:34:54 622

原创 【HQL - 查询累积销量排名第二的商品】

查询累计销量排名第二的商品,dense_rank()、nullif()、over()函数的使用

2023-04-28 17:08:34 468

原创 【数据库并发操作带来的问题 - - - 丢失修改、不可重复读、读脏数据】

数据库并发操作带来的问题:丢失修改、不可重复读、读脏数据

2023-04-27 17:57:21 3392

原创 【Linux系统安装Python3 --- 思路清晰的五大步】

Linux安装python3,思路清晰的五大步

2023-04-27 17:48:07 3201

原创 【哈希表:哈希函数构造方法、哈希冲突的处理】

常见的哈希函数的构造方法、哈希冲突的处理

2023-04-01 19:12:15 2784

原创 【查找算法 - 顺序查找、二分查找、分块查找】

顺序查找、二分查找、分块查找算法

2023-03-31 10:00:00 1870

原创 【常见的十种排序算法及稳定性比较】

插入排序、希尔排序、选择排序、堆排序、冒泡排序、快速排序、归并排序、基数排序、基数排序、桶排序,以及稳定性比较,总结

2023-03-29 13:50:27 2962

原创 【关系数据库设计基础理论 - 候选关键字、无损连接性、函数依赖的判断】

候选关键字、无损连接性、函数依赖的判断,求属性的闭包

2023-03-12 18:20:05 2046

原创 【死锁 - 题型2 - 每个进程最少需要多少个资源,就会发生死锁】

每个进程最少需要多少个资源,就会发生死锁

2023-03-12 17:12:46 2475

原创 【死锁 - 题型1 - 并发进程所需的最少资源数】

并发进程不会发生死锁的最少资源数计算,公式总结。

2023-03-12 16:49:07 2569

原创 【信号量机制及应用】

信号量机制及应用,利用信号量实现进程互斥、实现前驱关系、实现进程同步

2023-03-07 21:42:59 1744

原创 【校验码 - 循环冗余校验码CRC】

循环冗余校验码CRC的计算

2023-03-03 15:25:19 1370 2

原创 【计算机系统 - 基础知识】带符号数的表示、原码、反码、补码、移码(增码)

【计算机系统 - 基础知识】带符号数的表示、原码、反码、补码、移码(增码)的表示方法

2023-03-02 20:47:48 1907

原创 【将一个数组按逆序存放】

用Java编写程序,将一个数组按逆序存放

2023-02-19 23:12:21 842

FlinkCDC-达梦JDBC-MySQL同步到达梦,mysql-cdc同步到达梦

FlinkCDC,MySQL同步到达梦所需的jar包

2026-02-15

FlinkCDC-达梦CDC-FlinkSQLAPI打jar包的方式的模板工程

FlinkCDC_达梦CDC_FlinkSQLAPI打jar包的方式的模板工程

2026-02-14

FlinkCDC-达梦CDC相关的jar包

FlinkCDC_达梦CDC相关的jar包

2026-02-14

FlinkCDC-MySQL同步案例所需jar包

FlinkCDC_MySQL同步案例所需jar包

2026-02-13

Hudi工具-DeltaStreamer(流式摄取工具)

Hudi工具-DeltaStreamer(流式摄取工具)-hudi版本:0.12.0

2026-01-25

hudi-1.1.0 maven-3.6.3

编译hudi1.1.0的包

2025-12-21

finereport中的fvs3.5.1

finereport中的fvs3.5.1

2025-09-07

nginx1.26.3安装包 主动健康检查模块补丁包 openssl、pcre、zlib依赖环境

nginx1.26.3安装包 主动健康检查模块补丁包 openssl、pcre、zlib依赖环境

2025-06-01

Hive on Spark 离线数仓生成的原始数据

2024年1月11号-13号的数据,包含7-10号的历史业务数据

2024-02-12

大数据双十一淘宝美妆数据.csv和type.txt文件免费下载

【大数据】双十一淘宝美妆数据.csv和type.txt文件 数据源文件 免费下载,下载不到的话私我一下,免费分享

2024-02-07

订单支付实时监控用到的日志文件:OrderLog.csv、ReceiptLog.csv

订单支付实时监控用到的日志文件:OrderLog.csv、ReceiptLog.csv

2023-08-03

基于埋点日志数据的网络流量统计 - PV、UV

PV、UV统计用到的数据文件

2023-08-01

三层交换网络连通性的方法,VLAN,VLANIF

计算机网络三层交换网络连通性的方法

2022-11-22

大数据-数据采集平台数据源(三)

用户行为日志生成

2022-11-09

大数据-数据采集平台(一)

jdk hadoop(linux编译过) zookeeper flume kafka

2022-11-04

大数据-数仓采集平台(二)

hive mysql sqoop 业务数据生成

2022-11-04

本地组策略编辑器.zip

本地组策略编辑器.zip

2021-01-25

Python绘图案例.zip

用Python写的绘图例子

2021-01-24

hadoop平台搭建所需安装包.zip

内含hadoop-2.7.2.tar.gz、jdk-8u261-linux-x64.tar.gz安装包

2021-03-27

FinalData数据恢复.exe

FinalData数据恢复企业版V2.0 非常好用的数据恢复软件

2021-08-12

数据恢复向导V2.1.0.zip

支持删除恢复,格式化恢复,高级恢复,U盘,固态盘都支持 0积分下载~免费下载

2021-08-12

Java基础语法练习.zip

各种三角形的打印,阶乘的计算,九九乘法表打印,输出最大数,英文字母的识别转换 适合Java初学者练习~免费下载~0积分下载

2021-08-12

studentManager.rar

简单学生管理系统

2021-07-17

PowerDesigner.zip

PowerDesigner.zip

2021-06-15

AdminLTE.zip

开源模板主体工具(已汉化)

2021-06-15

自动配置免密登录和jdk.zip

脚本自动配置免密登录和Java环境

2021-05-25

mysql-5.6.30-linux-glibc2.5-x86_64.tar.gz

安装包

2021-04-13

xshell、xftp远程连接工具.zip

xshell、xftp远程连接工具.zip

2021-03-27

Cutterman_panel_3.5.0.zip

Ps插件cutterman

2021-02-08

awesomium_v1.6.6_sdk_win.zip

解决MarkdownPad 2 的视图问题

2021-02-10

winutils.zip

winutils.zip

2021-01-25

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除