- 博客(36)
- 资源 (5)
- 收藏
- 关注
原创 解决trino查询show create table中文乱码问题
trino在使用show create table时,如果结果包含中文就会乱码(不是乱码,只是不支持中文字符编码,故需要转换一下)解决trino查询show create table中文乱码问题。
2024-09-20 10:06:51
435
1
原创 feign client发送Post请求,发送对象参数,服务端接收不到正确参数报错排查
在feignclient接口方法中使用consumes属性设置请求的Content-Type为multipart/form-data。当我使用客户端调用接口时,服务端在保存数据到数据库时报错,无其余信息。记一次feignclient发送请求服务端接收不到正确参数排查。可以看出,服务端接口为Post请求,传参对象为Team。Team中有name和description两个属性。
2024-09-14 16:53:17
917
原创 测试用例无法读取配置文件问题记录
原因:在web模块下的resources放了bootstrap.yaml以及application.yaml。即需要加载bootstrup.yaml以及application.xml等文件。biz模块的测试用例运行失败,总是报无法装载类,因为获取不到配置。在springboot应用中,写了两个模块web和biz模块。使用@SpringBootTest时,需要加载上下文,2.在biz模块中的测试目录创建resources目录。1.在biz模块中,加入web模块的文件。web模块的测试用例运行正常。
2024-09-12 10:32:08
384
原创 spring boot应用上传大小限制:解决The field file exceeds its maximum permitted size of 1048576 bytes.错误
tomcat服务会限制上传大小为1mb,要解除限制,需要在。
2024-09-12 10:24:59
824
原创 trino jdbc使用代理用户查询数据
使用trino-jdbc查询hive,clickhouse,paimon,mysql等,并使用trino自带的权限系统进行管控。使用代理用户,可以很好的进行权限管控。
2024-09-12 09:55:39
497
原创 SpringBatch4升级SpringBatch5踩坑指南
springbatch4升级springbatch5指南,全面踩坑,报错,位置,参考,解决方案等
2024-09-02 09:20:16
1669
1
原创 Spring Batch4升级Spring Batch5指南
本文旨在帮助您将应用程序移植到Spring Batch 5.0中。本文章旨在翻译原文以及添加一些在实践中的踩坑以及经验。Spring Batch介绍:一个轻量级且功能全面的批处理框架,使用 Spring 和 Java 编写离线和批处理应用程序,旨在为开发对企业系统日常运行至关重要的批处理应用程序提供支持。
2024-07-26 13:00:27
1030
原创 springboot项目升级jdk17问题:Unable to make public final java.lang.Object java.util.HashMap$Node.getKey() a
Unable to make public final java.lang.Object java.util.HashMap$Node.getKey() accessible: module java.base does not "opens java.util" to unnamed module @3f6b0be5
2024-07-26 10:45:14
450
原创 解决报错Failed to configure a DataSource: ‘url‘ attribute is not specified and no embedded datasource co
解决报错Failed to configure a DataSource: 'url' attribute is not specified and no embedded datasource could be configured.Reason: Failed to determine a suitable driver class
2024-07-25 18:59:53
1099
5
原创 SpringBoot应用升级jdk17后出现Failed to configure a DataSource: ‘url‘ attribute is not specified...
【代码】SpringBoot应用升级jdk17后出现Failed to configure a DataSource: ‘url‘ attribute is not specified...
2024-03-27 10:15:26
289
2
原创 springboot+hive-jdbc在jdk17环境下报class org.apache.jasper.servlet.JspServlet cannot be cast to class jak
【代码】springboot+hive-jdbc在jdk17环境下报class org.apache.jasper.servlet.JspServlet cannot be cast to class jak。
2024-03-15 16:41:49
1348
3
原创 win10打开了一个东西,但是在屏幕上找不到怎么办
win10打开了一个东西,但是在屏幕上找不到怎么办这种情况通常发生在关掉了打开的扩展屏幕的时候,程序在任务栏有显示,但是就是不显示在屏幕上
2022-08-31 10:09:16
4350
原创 flink kafka scan =.startup.mode的几个选项
flink kafka scan =.startup.mode的几个选项
2022-06-13 17:23:31
10368
原创 DW,DM名词解释
DW ,DM等名词概念DB,数据库DW,数据仓库,保存的是数据再不通时间点的状态DM,以某个业务应用为出发点而建立的局部DW,DW只关心自己需要的数据,不会全盘考虑企业整体的数据架构和应用给,每个应用有自己的DMODS,操作性数据仓库,最早的数据仓库模型,业务系统的数据结构是怎样的,ods数据库的结构就是怎样的。比我我们从mysql中导入数据,ods层的元数据和数据和mysql中完全一致。...
2021-12-10 18:32:23
3042
原创 Kafka的Producer发送消息
原文地址:https://kafka.apache.org/30/javadoc/org/apache/kafka/clients/producer/KafkaProducer.html公共类KafkaProducer<K, V>extends Object实现了Producer <K, V>将记录发布到 Kafka 集群的 Kafka 客户端。生产者是线程安全的,跨线程共享单个生产者实例通常比拥有多个实例更快。下面是一个简单的例子,它使用生产者发送包含序列号作为键/值对
2021-10-25 16:48:44
832
原创 安装kafka单机版
安装kafka单机版kafka是基于Scala开发,需要java的运行环境,所以首先要确保已经安装配置好java环境kafka自带集成了zookeeper一、下载解压下载地址:http://kafka.apache.org/downloads解压:tar -zvxf kafka_2.12-3.0.0.tgz二、进入目录运行bin/zookeeper-server-start.sh config/zookeeper.propertiesbin/kafka-server-start.sh
2021-10-22 15:38:14
686
原创 hive中的partition
在Hive select查询中一般会遍历整个表的内容,有时候只需要遍历表中关心的一部分数据,因此建表时引入了partition的概念一个表可以拥有一个或者多个分区,每个分区以文件夹的形式单独存在表文件夹的目录下。分区是以字段的形式在表结构中存在,可以查看到字段存在,但不存放数据单分区在表文件目录下只有一级目录,多分区在表文件夹下以多文件夹嵌套模式呈现...
2021-10-12 13:32:22
827
原创 SpringBoot在浏览器中无法访问
记录一个springboot启动但无法在浏览器访问的问题:springboot新人,在创建helloworld程序时,因为开启了金山词霸,所以在浏览器一直访问不了解决方法:将金山词霸关了,重启idea我服了,这个金山狗我大好的青春,淦!参考自:https://www.cnblogs.com/xiemingjun/p/10652665.html...
2021-10-11 11:24:54
1484
原创 Hive单机版安装
重新换了台电脑,又不想移动原来的虚拟机,所以重新部署了一下Hadoop环境生态安装hive一、下载直接官网下载3.0以上版本二、解压tar -zvxf apache-hive-3.1.2-bin.tar三、修改配置文件进入安装的conf目录cp hive-env.sh.template hive-env.sh修改(添加)Hadoop路径HADOOP_HOME=/usr/app/hadoop新建 hive-site.xml 文件,内容为:<?xml version="
2021-10-09 14:58:53
517
原创 Ubuntu20.04安装MySQL详解
没想到啊,一个MySQL的安装都会出问题,麻了麻了一、安装sudo apt-get install mysql-server二、文件配置此时安装的MySQL只能在本地连接,端口也尚未开启sudo vim /etc/mysql/ s mysql.conf.d/mysqld.cnf将bind-address =127.0.0.1注释掉在user=mysql 下添加:port =3306退出保存ESC :wq然后修改my.cnfsudo vim /etc/mysql/my
2021-10-09 13:32:04
491
原创 Scala lazy用法
1.如果变量初始化耗时,则可以用lazy加以声明,用到的时候才进行初始化2.构造顺序问题,创建子类对象时,父类中的变量需要用到子类的变量,则需要用lazy对父类中的变量加以声明3.缺点:每次使用前都会检查是否已经初始化,会有额外的开销...
2021-10-08 10:24:17
373
原创 Scala教程
SCALA第一章1.11.21.3第二章 变量和数据类型2.1 注释2.2 变量和常量2.3 标识符和命名规范2.4 字符串输出2.5 键盘输入2.6 数据类型Scala中一切数据都是对象,都是Array子类2.6.1 整数类型整型分类:byte,short,int,long分别是8位,16位,32位,64位案例实操:是2.6.2 浮点类型2.6.3 字符类型2.6.4 布尔类型2.6.5 Unit类型Unit表示空值,null类型只有一个实例值null
2021-09-27 18:14:46
903
原创 java使用try(){}catch的方法隐式关闭资源
java使用try(){}catch的方法隐式关闭打开文件package filezip;import com.sun.xml.internal.ws.policy.privateutil.PolicyUtils;import org.apache.commons.compress.archivers.ArchiveEntry;import org.apache.commons.compress.archivers.zip.ZipArchiveInputStream;import java.
2021-09-13 09:48:52
440
原创 JDBC数据库连接
JDBC数据库连接package example;import java.sql.Connection;import java.sql.DriverManager;import java.sql.SQLException;public class DbUtil { public static final String URL=""; public static final String USER=""; public static final String PASSWO
2021-09-07 16:54:14
81
原创 JDBC原理及应用
JDBC原理及应用目录JDBC原理及应用JDBC概要JDBC原理加载驱动建立连接获取Statement执行SQL语句处理结果集关闭连接JDBC主要APIJDBC概要*JDBC(Java Database Connectivity)Java访问数据库的解决方案希望用相同的方式访问不同的数据库,以实现与具体数据库无关的Java操作界面jdbc定义一套标准接口,即访问数据库的通用API,不同的数据库厂商根据各自数据库的特点去实现这些接口*JDBC原理加载驱动Class.forName("orac
2021-09-07 10:35:50
413
原创 hive查询时产生错误解决办法
Exception in thread “main” java.lang.IncompatibleClassChangeError: Class com.google.common.collect.ImmutableSortedMap does not implement the requested interface java.util.NavigableMap
2021-09-03 16:59:13
1523
1
原创 Java输出zip文件文件列表和大小
Java解压文件打印文件名和文件大小:本例中使用common compressimport org.apache.commons.compress.archivers.ArchiveEntry;import org.apache.commons.compress.archivers.zip.ZipArchiveInputStream;import java.io.File;import java.io.FileInputStream;import java.io.IOException;im
2021-09-02 13:33:24
1563
原创 Hadoop单机环境搭建
Hadoop单机环境搭建一、jdk环境二、IP地址和主机名映射三、生成公私钥授权四、下载解压Hadoop五、配置Hadoop环境变量六、修改Hadoop配置文件七、关闭防火墙八、初始化九、启动十、Yarn配置启动一、jdk环境从官方下载jdk,版本1.8及以上即可给个地址:jdk8Ubuntu环境下载64位链接二、IP地址和主机名映射将主机名与IP地址映射,可以用主机名进行任务分发或文件传输以及其他工作使用hostname命令 ,查看本机的主机名;使用ip addr命令 ,查看本机的ip地
2021-08-20 16:13:55
607
原创 hadoop搭建全分布环境踩过的坑
1.创建的三台虚拟机之间ping不通2.运行start-dfs.sh时,出现rcmd:socket:Permission denied错误3.运行start-all.sh时,启动namenode和datanode出现ssh exited with exit code 13.1 每一个公钥都要写入authorized_keys文件3.2 环境变量配全4.namenode无法启动5.将hadoop上传至其他节点出现permission denied6.格式化namenode出现data文件夹不可用
2021-08-20 14:52:29
970
原创 删除电脑上删不掉的文件夹和文件
我们在使用电脑的时候,经常会出现一些文件夹无法删除的情况,甚至使用文件粉碎机也无法删除,遇到这种情况,我们应该怎样去删除呢?
2020-05-30 10:57:46
643
原创 WIN10常用快捷键
WinXP 已过时,WIN7已停止更新,已于2020年初停止服务 。而WIN10是微软公司发布的最后一款独立的Windows操作系统,也就是说:之后的系统将以推送更新的形式发布,即用户不需要重装统,像手机一样更新系统就可以辣。关于Win10, 怎样让其运行流畅发挥它的能力,这几招是必备的
2020-05-29 23:19:37
959
删除电脑上删不掉的文件夹
2020-05-30
大学生英语presentation,生命就像一张纸life is just one piece of paper
2020-05-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人