- 博客(146)
- 资源 (15)
- 收藏
- 关注
RSS订阅原创 初始化Superset数据库时提示：Refusing to start due to insecure SECRET_KEY（由于不安全SECRET_KEY而拒绝启动）
安装完superset3.0.0后，初始化数据库的时候提示，拒绝启动，由于不安全的SECRET_KEY
2024-02-18 23:27:01
2402
原创 Spring Boot打war包部署到Tomcat，访问页面404 ！！！
Spring Boot打war包部署到Tomcat，访问页面404 ！！！解决办法：检查Tomcat版本和Jdk的对应关系，我的Tomcat是6.x，jdk是8版本显然不兼容。所以访问不到。更换9版本的Tomcat后，正常访问
2024-02-18 19:20:19
1856
原创 SpringBoot项目本地无错误，打包上传服务器连不上MySQL报错：com.alibaba.druid.pool.DruidDataSource : init datasource error
com.alibaba.druid.pool.DruidDataSource : init datasource error, url: jdbc:mysql://localhost:3306/myblog?serverTimezone=UTC&useUnicode=true&characterEncoding=utf8&characterSetResults=utf8&useSSL=falsejava.sql.SQLException: Access denied for user 'root'@'
2024-02-18 19:19:44
556
原创 Exception when loading 2 in table dim_user_zip with loadPath=hdfs://hadoop101:8020/......
Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Exception when loading 2 in table dim_user_zip with loadPath=hdfs://hadoop101:8020/warehouse/gmall/dim/dim_user_zip/.hive-staging_hive_20
2024-02-16 10:00:00
534
原创 Hive中的复杂数据类型 - array、map、struct
Hive中的复杂数据类型，学会如何使用，如何指定字段为struct类型？如何向struct类型的字段中插入数据？如何取出struct字段中的值？
2024-02-14 12:56:48
1773
原创 横扫Spark之 - RDD（Resilient Distributed Dataset）弹性分布式数据集
Spark中最基本的数据抽象 - RDD，既然叫弹性分布式数据集，那如何理解这个弹性、分布式、数据集最后RDD的5个主要特性分别是什么含义
2024-01-30 14:22:46
1482
原创 手写MapReduce实现WordCount
WordCount到底要干什么？怎么用MapReduce实现WordCount?手写一个自己的WordCount，揭开MapReduce的神秘面纱💡
2023-12-23 12:48:18
1634
原创 Windows上运行第一个wordCount的时候报错Exception in thread “main“ 0: No such file or directory
Windows上运行第一个MapReduce程序-WordCount报错：Exception in thread "main" 0: No such file or directory
2023-12-22 11:38:34
551
原创 解密Flink的状态管理：探索流处理框架的数据保留之道，释放流处理的无限潜能！
状态是流处理中非常重要的概念，它扮演着关键的角色。本文将带你了解状态的本质及其应用场景，以及常见的状态分类。特别地，我们将重点关注算子状态和键控状态，揭示其在流处理中的重要性和实际应用。通过深入了解状态管理的关键技巧，读者将能够提升流处理任务的高可靠性，并从中获得无限的潜力和机会。无论是对于初学者还是有经验的流处理开发者，本文都将为您带来新的启示和思考。
2023-08-14 12:29:23
467
原创 基于埋点日志数据的网络流量统计 - PV、UV
网站流量统计指标PV、UV的概念，求解思路，代码实现。使用Flink进行PV、UV量的统计练习。
2023-08-03 10:15:00
1231
原创 Flink - sink算子
Flink中常见的sink算子，对接Kafka、Redis、ES、自定义sink、jdbc sink。案例代码使用。
2023-08-02 10:00:00
1094
原创 Flink - souce算子
Flink中常见的source算子，从Java集合中读取数据，从本地读取，从HDFS中读取，从Kafka中读取数据，从Socket中读取，最后自定义Source的步骤及demo示例
2023-07-30 16:20:59
770
原创 我的第一个Flink程序 - 三种WordCount方式
flink的三种word count案例，flink的批处理完成word count ，流处理方式，分为有界流和无界流处理word count
2023-07-26 12:38:54
347
原创 源码跟踪，案例详解Spark的分区规则
spark的RDD分区规则，不指定分区时的默认分区规则，以及指定分区后的具体分区流程，区内数据的确定。源码跟踪手撕分区
2023-07-24 10:30:00
519
原创 Scala集合常用函数 - 高级计算函数
Scala集合常用的高级计算函数，过滤、转换/映射、扁平化、扁平化映射、分组、简化/规约、折叠，将两个map合并
2023-07-18 10:20:42
1177
2
原创 Scala集合常用函数 - 衍生集合
Scala集合中常用的函数，衍生集合，也就是通过一个集合的操作，转换为另外一个集合。获取集合的头、集合的尾、集合的最后一个元素、初始元素、集合反转、取前(后)n个元素、删除前(后)n个元素、集合的并集、交集、差集，拉链以及滑窗
2023-07-15 10:06:30
697
原创 Flume自定义拦截器 - ETL拦截器和分类拦截器
深刻的理解了Flume中的拦截器和选择器，以及Source Selector、Channel Selector。自定义拦截器的步骤，并编程实现了一个自定义的拦截器，来进行日志过滤，选择，以及发送到不同的Kafka topic中
2023-06-05 14:00:56
1238
原创 Directory hdfs://hadoop101:8020/warehouse/xxx/dt=2021-01-03 could not be cleaned up.
向Hive分区表中load数据报错：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Directory hdfs://hadoop101:8020/warehouse/gmall/ods/ods_order_info/dt=2021-01-03 could not be cleaned up.可能是手动删除数据导致元数据没有被删除，所以再次load数据报错，解决办法是将表删除再重新创建
2023-06-03 20:21:55
382
原创 keytool 错误: java.lang.Exception: 未生成密钥对, 别名 ＜jetty＞ 已经存在
keytool 错误: java.lang.Exception: 未生成密钥对, 别名 已经存在，已解决
2023-06-03 19:53:10
1591
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人