自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(114)
  • 资源 (3)
  • 收藏
  • 关注

原创 麒麟sp1 rpm包下载地址

Index of /NS/V10/V10SP1/os/adv/lic/base/aarch64/Packages/ (cs2c.com.cn)

2024-08-20 23:42:11 67

原创 安装NFS扩展

apisix-httpbin 应用路由指定的域名>:<apisix-gateway 外部访问端口>(例如此处为 httpbin.ui:30408)即可访问到 apisix-httpbin 应用路由所关联的后台服务。--set nfs.path=/home/data/nfs-share/ \ #指定nfs的共享目录。--set storageClass.name=nfs-sc-default #指定sc的名字。#解压后可以看到values.yaml。

2024-08-15 23:37:24 347

原创 通道(channel)传递数据的例子写一个

【代码】通道(channel)传递数据的例子写一个。

2024-08-14 22:59:42 269

原创 hudi sql

DROP TABLE IF EXISTS hudi;CREATE TABLE hudi(ts BIGINT, uuid VARCHAR(40) PRIMARY KEY NOT ENFORCED, rider VARCHAR(20), driver VARCHAR(20), event VARCHAR(255), fare DOUBLE, process BIGINT, city VARCHAR(20)) PARTITIONED BY (`city`) WITH ('connector' = 'hudi',

2024-08-11 17:20:51 403

原创 jvm参数

JAVA_OPTS: -server -Xms1g -Xmx1g -Xmn512m -XX:+ExitOnOutOfMemoryError -XX:+HeapDumpOnOutOfMemoryError -XX:+IgnoreUnrecognizedVMOptions -XX:+PrintGCDateStamps -XX:+PrintGCDetails -XX:+PrintGC -XX:+UseGCLogFileRotation -XX:GCLogFileSize=50M -XX:NumberOfGCL

2024-08-03 13:50:43 163 1

原创 docker file redis

FROM centos:7ENV MYPATH /dataWORKDIR $MYPATHRUN mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo_bakRUN rm -rf /etc/yum.repos.d/*RUN curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repoRUN sed -

2024-07-30 00:41:38 387

原创 mysql创建数据库的SQL

CREATE DATABASE IF NOT EXISTS dbname DEFAULT CHARACTER SET utf8mb4 DEFAULT COLLATE utf8mb4_general_ci;

2024-07-27 16:50:54 369

原创 jstat -gc 60120 5000 100

这些参数和缩写通常是用于描述 Java 进程的内存使用情况和垃圾收集(GC)活动统计的指标,通常是从 JDK 提供的工具或者 JVM 的性能监控工具输出的结果。这些参数通常用于分析 Java 进程的内存分配、使用情况以及 GC 活动的频率和效率。通过这些数据,可以评估应用程序的内存需求、性能瓶颈和优化方向。

2024-07-26 11:29:11 354

原创 数据湖ods是什么意思

数据湖是一个存储大量原始和结构化数据的系统或存储库,数据以其原始格式存储,而不需要预定义的数据结构。数据湖允许存储所有类型的数据,包括结构化数据(如关系数据库中的表)、半结构化数据(如日志文件或XML数据)和非结构化数据(如文本文件或图像文件)。数据湖的目标是提供一个灵活的数据存储解决方案,以便于数据分析、数据挖掘和机器学习等应用的进行。

2024-07-18 14:08:39 423

原创 其取其实打实打算

f.close();f.close();f.close();

2024-07-16 23:43:14 269

原创 pulsar单节点能开启事务吗?是不是真的

Apache Pulsar 支持事务,但是需要在分布式模式下运行。单节点模式下不支持 Pulsar 事务。事务功能在 Pulsar 中依赖于分布式的 BookKeeper 存储服务,以确保事务的持久性和可靠性。综上所述,要使用 Apache Pulsar 的事务功能,必须在分布式模式下部署 Pulsar,并配置好 BookKeeper。单节点模式不支持 Pulsar 的事务。

2024-07-05 17:31:07 296

原创 FeignClient配置

如果你的应用中有多个相同类型的 Bean(例如多个 Feign 客户端接口),并且你希望某一个 Feign 客户端在注入时具有优先权,则可以通过设置 primary = true 来确保它被优先选择。* 如果有特定情况需要另外的 Feign 客户端优先注入,你可以根据实际情况设置不同的 primary 属性值,或者通过其他手段指定具体的 Bean。* 主要的 Bean 在自动装配时具有优先权,如果没有明确指定注入哪一个 Bean,则会选择主要的 Bean。* 默认是primary = true。

2024-07-01 11:21:41 309

原创 redis命令

集群正常的时候,设置host是:redis-cluster.demo.svc.cluster.local。上面是启动redis的所有节点。

2024-06-30 21:32:12 260

原创 部署startRocks集群

向集群中添加新的 Follower FE 节点时,您必须在首次启动新 FE 节点时为其分配一个 helper 节点(本质上是一个现有的 Follower FE 节点)以同步所有 FE 元数据信息。您可以通过在相应实例上运行以下命令来停止 StarRocks 集群。搭建成了集群模式,三个节点都要执行下面的命令。202上部署flink、201上部署mysql。1、先启动一个fe leader(201)201、202、203上执行。201、202、203上执行。2、启动所有be、cn。4、注册fe实现高可用。

2024-06-30 21:25:20 470

原创 bcprov-jdk15on和bcpkix-jdk15on有什么区别

都是 Bouncy Castle 密码库的不同组件,针对不同的用途和功能。在实际使用中,你可能会根据具体的安全需求和功能要求选择使用。,或者两者都使用,以满足不同的安全操作和证书管理需求。

2024-06-28 11:41:36 768

原创 k8s部署consul简易版

metadata:spec:selector:template:metadata:labels:spec:ports:command:- "-c"name: dataspec:resources:requests:---metadata:spec:ports:port: 8500selector:---metadata:labels:

2024-06-28 10:00:37 282

原创 StarRocks集群部署文档

手动部署 StarRocks | StarRocks

2024-06-27 09:52:14 226

原创 spi service实现类加载代码

/spi机制加载类。

2024-06-17 22:24:09 245

原创 flink读取hive写入http接口

在这种模型中,当一个类需要被加载时,首先会从父类加载器开始查找,如果父类加载器能够找到并加载该类,那么就直接使用父类#加载器加载的类,不再尝试由当前类加载器自己加载。log.info("加载org.apache.flink.table.planner.delegation.DialectFactory类的路径是 === {}", jarPath2);#相对应的,还有另一种类加载器委派模型叫做 #"child-first",在这种模型中,类加载器会首先尝试自己加载类,只有在自己无法加载时才委托给父类加载器。

2024-06-08 22:45:19 1224

原创 查看Hive表的描述信息,包括在HDFS上的Location信息

DESCRIBE FORMATTED 表名;

2024-06-01 14:15:42 1377

原创 文件批量替换

替换yaml文件中的。

2024-05-26 16:13:41 426

原创 Caused by: java.lang.NoSuchMethodError: ‘org.apache.hadoop.hdfs.DFSInputStream$ReadStatistics org.ap

spark hudi写入hdfs报错,hdfs版本不兼容,需要手动编译hudi-spark3.4-bundle_2.12-0.14.1.jar。

2024-05-22 19:06:26 352

原创 mysql-netty-flink-cdc-kafka-spark-hudi-hdfs的例子

驱蚊器。

2024-05-13 02:23:45 131

原创 springboot使用@value读取配置

application.yamlspring: option: task: enable: true cron: 0 0 * * * *获取import org.slf4j.Logger;import org.slf4j.LoggerFactory;import org.springframework.beans.factory.annotation.Value;import org.springframework.boot.autoconfi

2024-04-28 16:49:44 479 4

原创 垃圾的flinkcdc

MySQL 默认是大小写不敏感的,使用反引号可以强制 MySQL 将表名或字段名视为区分大小写。如果不使用反引号,MySQL 将自动将表名和字段名转换为小写。: 使用反引号可以避免使用MySQL的保留字和关键字作为表名或字段名时产生的冲突。比如,你可以创建一个名为。虽然使用反引号有一定的好处,但过度使用也会增加代码的复杂性,一般来说,只有在必要的情况下才使用反引号。都将被视为大小写敏感的,而不会被转换为小写。

2024-04-28 00:00:15 597 3

原创 JSON.g4

header {;'}' {| '{}' {;']' {| '[]' {;;;STRING;;;;;NUMBER: '-'?EXP?;: '0';[0-9]+;WS;

2024-04-20 23:50:20 398

原创 Some content in the namespace has finalizers remaining: deletion.finalizers.rabbitmqclusters.rabbitm

这个错误消息表明命名空间中的某些资源仍然具有 finalizers(最终器),这阻止了命名空间的终止操作。Finalizers 是 Kubernetes 中的一种机制,用于确保资源在删除时执行必要的清理操作。当资源被删除时,Kubernetes 将尝试执行 finalizers 中定义的操作,然后再删除资源。一旦确定了具有 finalizer 的资源,你可以尝试删除这些 finalizer,使资源不再阻止命名空间的终止。这个命令将列出所有 RabbitMQ 集群资源的名称,你可以进一步检查这些资源。

2024-04-15 12:06:11 394 1

原创 graylog使用Sidecars方式收集springboot程序的日志

services:mongodb:networks:- graylogulimits:memlock:hard: -1soft: -1nofile:networks:- grayloggraylog:networks:- graylog- mongodbports:# GELF TCP# GELF UDPnetworks:graylog:

2024-04-08 21:54:41 674

原创 k8s部署微服务例子

需要部署minio、nacos、mysql、consul、elasticsearch、视频解析服务、nfs、skywalking-oap及ui。

2024-04-04 22:20:54 458

原创 antlr docker生成文件

docker run --rm -u $(id -u ${USER}):$(id -g ${USER}) -v `pwd`:/work antlr/antlr4 -Dlanguage=Java JSON.g4

2024-03-28 21:46:51 102

原创 DNS TCP fallback on UDP query timeout disabled. Upgrade Netty to 4.1.105 or higher.

DNS TCP fallback on UDP query timeout disabled. Upgrade Netty to 4.1.105 or higher.

2024-03-27 22:54:42 579

原创 Install Consul on Kubernetes with Helm

【代码】Install Consul on Kubernetes with Helm。

2024-03-17 22:14:23 670

原创 spark-sql

[root@localhost bin]# ./spark-sqlError: Failed to load class org.apache.spark.sql.hive.thriftserver.SparkSQLCLIDriver.Failed to load main class org.apache.spark.sql.hive.thriftserver.SparkSQLCLIDriver.You need to build Spark with -Phive and -Phive-thriftse

2024-02-21 16:24:11 558

原创 flink测试SQL

她很为我开心,但是又在担心自己没有得,所以一边看手机,一边嘟嘟囔囔的说:我肯定还没得,我们专业申请的人太多了。INSERT INTO `source_demo` VALUES ('25', '怎样确定你的女朋友(男朋友)是适合的结婚对象?INSERT INTO `source_demo` VALUES ('20', '2022 年马上就要过去一半儿了 ​​​\r\n');INSERT INTO `source_demo` VALUES ('21', '清醒,自律,知进退,爱自己');

2024-02-03 22:21:05 739 1

原创 kafka命令

1.创建topic。

2023-12-22 22:39:32 350

原创 Error in query: DELETE is only supported with v2 tables.

Error in query: DELETE is only supported with v2 tables.

2023-11-28 13:28:48 735

原创 ClassNotFoundException: org.apache.hive.spark.client.Job

环境:hive查询数据,yarn查看日志出现上面的错误。到hadoop的目录查询运行日志。

2023-11-28 01:23:04 814 1

原创 kubesphere安装依赖文件

yum install socat -yyum install conntrack -y

2023-11-23 22:09:10 256

原创 xml文件的注释CDATA必须写在元素的里面

CDATA[ 注释内容 ]]>

2023-11-15 10:41:05 73

原创 k8s集群引入外部服务kafka

metadata:labels:app: kafkaspec:ports:port: 9092---metadata:labels:app: kafkasubsets:ports:port: 9092。

2023-11-10 11:23:05 78

windows10使用qemu搭建arm系统的虚拟网卡驱动安装包

https://www.croxy.network/_zh/

2024-03-07

scala编写,以spark stream方式监听消费kafka的topic,同步写入elasticsearch

scala编写,以spark stream方式监听消费kafka的topic,同步写入elasticsearch

2023-11-06

spring-boot-clint webservice调用服务的例子

1、spring-boot 3.0.6 2、调用webservice的例子 3、调用服务端spring-boot-webservice 4、k8s 环境部署

2023-08-05

spring-boot-webservice例子

1、使用cxf-spring-boot-starter-jaxws-4.0.2 2、spring-boot 3.0.6 3、webservice服务发布的例子

2023-08-05

nfs-subdir-external-provisioner安装文件

使用k8s.gcr.io/sig-storage/nfs-subdir-external-provisioner:v4.0.2镜像

2023-06-26

k8s-gitlab-ci-demo

1、spring-boot应用程序,内部controller实现了Word POI导出的demo。 2、实现了Dockerfile镜像打包。 3、在Kubernetes v1.22.12部署的相关yaml。 4、集成kube-prometheus监控功能,可查看JVM相关信息。 5、word转pdf的demo,以及转换乱码的解决方案。 6、可在Kubernetes 上运行。 7、需要自添加总问字体文件到和license.xml

2023-02-27

flink消费kafka数据存储到elasticsearch的演示deno

1、flink监听localhost的kafka,作为source,接收数据。 2、数据流转到elasticsearch 3、flink web ui提交jar文件,创建任务流程。 4、流程测试。

2022-07-23

commons-cli-1.5.0.jar

commons-cli-1.5.0.jar

2022-02-27

flink-shaded-hadoop-3-uber-3.1.1.7.2.9.0-173-9.0.jar

flink-shaded-hadoop-3-uber-3.1.1.7.2.9.0-173-9.0.jar

2022-02-27

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除