自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 收藏
  • 关注

原创 Android studio安装全步骤

Android studio安装的前提:保证安装了jdk1.8版本以上验证方式:cmd命令提示符窗口>javac版本在1.8以上,且能展示相关信息即可。

2024-09-27 10:34:51 527

原创 DolphinScheduler安装及部署

(1)五台节点均需部署JDK(1.8+),并配置相关环境变量。(2)需部署数据库,支持MySQL(5.7+)或者PostgreSQL(8.2.15+)。如 MySQL 则需要 JDBC Driver 8.0.16。(3)需部署Zookeeper(3.4.6+)。(4)如果启用 HDFS 文件系统,则需要 Hadoop(2.6+)环境。(5)五台节点均需安装进程管理工具包psmisc。

2023-12-06 11:30:17 233 1

原创 Redis学习笔记

NoSQL:Not Only SQL,不仅仅是SQL,泛指非关系型数据库特点:适用场景:不适用场景:1)Mencahed很早出现的NoSQL数据库数据都在内存中,一般不持久化支持简单的key-value模式,数据类型支持单一一般是作为缓存数据库辅助持久化的数据库2)Redis几乎覆盖了Memcached的绝大部分功能数据都在内存中,支持持久化,主要用作备份恢复支持丰富的数据类型,例如 string 、 list 、 set、zset、hash等一般是作为缓存数据库辅助持久化的数据库3)mongoDB高性能、

2023-10-31 19:37:21 67 1

原创 JAVA学习笔记

1、打开windows+R cmd命令提示符窗口C:\Users\with5>D: 盘符切换到D盘目录下D:\>D:\>dir 查看当前路径下的内容D:\>cd develop 进入单级目录cd 目录1\目录2\... 进入多级目录cd.. 回退到上一级目录cd\ 回退到盘符目录cls 清屏exit 退出命令提示符窗口2、JDK的安装目录下载地址:Java Downloads | Oracle选择对应系统,下载.exe文件,打开程序安装

2023-10-31 19:09:54 74 1

原创 Apache Doris 学习笔记

由百度大数据部研发(之前叫百度 Palo,2018年贡献到 Apache 社区后,更名为 Doris )Apache Doris是一个现代化的MPP (Massively Parallel Processing,即大规模并行处理)分析型数据库产品,仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。其架构简洁、易于运维、支持10PB以上的超大数据集、可以满足多种数据分许需求(固定历史报表、实时数据分析、交互式数据分析、探索式数据分析等)

2023-10-30 14:10:50 2154 1

原创 大数据面试

大数据开发常用框架面试总结

2023-10-28 11:22:44 359 1

原创 大数据中的各类框架优化

state.backend.rocksdb.compaction.level.max-size-level-base: 320m #默认64mb。4个分区 ==> 并行度为4 ==> 4个slot ==> CPU:slot=1:2 ==> 2个CPU ==> 8G内存(1个CPU 4G)堆外:taskmanager.memory.task.off-heap.size,默认0,表示不使用堆外内存。堆外:taskmanager.memory.framework.off-heap.size,默认128MB。

2023-10-27 20:55:35 158 1

原创 Flink CEP整理

CEP(Complex Event Processing,复杂事件处理)复杂事件:多条数据、多个事件(底层原理:状态)Flink CEP是在Flink中实现的复杂事件处理库,允许在无休止的事件流中检测事件模式目标:从有序的简单事件流中发现一些高阶特征输入:一个或多个由简单事件构成的事件流处理:识别简单事件之间的内在联系,多个符合一定规则的简单事件构成复杂事件输出:满足规则的复杂事件。

2023-10-25 20:58:12 55

原创 Flink CDC整理

在Hadoop分布式文件系统(HDFS)上尝试进行写操作(使用root用户上传的jar包 普通用户无法使用。进行写操作,但未获得足够的权限。打包Java代码上传到集群运行时。查看MySQL配置后未切换用户。尝试在HDFS上的根目录。重新上传jar包 并重新运行。),但由于权限问题被拒绝(在pom.xml中添加。打包时未添加打包插件。

2023-10-25 18:55:33 739

原创 Flink SQL报错

原因:sink_upsert表连接器未修改类型。解决:创建kafka_source表。原因:未创建source表。

2023-10-24 14:00:03 1174

原创 Superset入门

点击Data/Databases --> 点击+DATABASE -> 点击填写Database及SQL Alchemy URI --> MySQL。将安装包Miniconda3-latest-Linux-x86_64.sh和base.txt依赖文件,导入虚拟机环境。点击Dashboards/+DASHBOARDS --> 点击Charts/+CHART。点击Data/Datasets --> 点击+DATASET --> 配置Table。--bind:绑定本机地址,即为Superset访问地址。

2023-09-10 16:13:06 168 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除