想做CTO的任同学...的博客_CSDN博客-Java,问题解决记录,Spark领域博主

在执行spark sql 的时候遇到了报错：java.lang.NoClassDefFoundError：com/fasterxml/jackson/module/paranamer/ParanamerAnnotationIntrospector ，看提示是缺少了这个pom依赖，但是由于源码是从公司工具库中拉下来的，所以我这边也没有直接添加相应的依赖，在和同事交流了过后，他git一下没一点问题，到我这就有问题了…这个时候，我本地是正常的，正当我以为岁月安好的时候，提交到集群上之后，emmmmmm，报错了…

2023-03-16 14:01:14 61

原创已解决：java.lang.NoClassDefFoundError: org/apache/commons/configuration/Configuration

搭建测试集群后，使用Spark SQL 测试集群数据，报错：java.lang.NoClassDefFoundError: org/apache/commons/configuration/Configuration，找不到这个依赖了，一开始在pom中添加上了。但是报错还是error，因为我使用了高版本的spark，但是 1.10 版本的 commons-configuration 不支持…，升级一下版本，换成1.6就行了。

2023-03-12 16:12:01 412

原创 Zookeeper安装部署

进入/opt/zookeeper/conf，复制一份 zoo_sample.cfg 文件并命名为 zoo.cfg。配置服务器编号：在/opt/zookeeper/zkData创建myid文件。在当前zookeeper安装包所在目录下，创建zkData和zkLog目录。进入zookeeper安装包下的bin目录，启动zookeeper。打开zoo.cfg文件，增加如下配置，在最后。将Zookeeper安装包解压缩，

2023-02-13 10:23:23 340

原创已解决：idea提示未配置 Spring Boot 配置注解处理器

在pom.xml里添加依赖，完成后并重启项目。

2023-02-08 09:16:17 865 1

原创 Dubbo服务方&消费方通信案例

目前的通信案例所有的操作全都是消费者发起，由服务提供者执行，这样会让提供者承担所有压力，一些功能消费者完全能够胜，把合法的参数再发送给提供者执行，效率高了，提供者也没那么累了，这就是本地存根。消费方的接口：controller中要依赖HelloService，所以我们创建一个接口，但是消费方不需要实现这个接口，因为让服务方会提供这个接口的服务！消费方的pom文件和服务方的一致，但是需要修改tomcat的端口为8002。一个接口，多个（版本的）实现类，可以使用定义版本的方式引入。

2023-02-03 16:31:10 1078

原创分布式系统架构解决方案—Dubbo

分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像单个相关系统”分布式系统（distributed system）是建立在网络之上的软件系统。简单来说：多个（不同职责）人共同来完成一件事！Dubbo是分布式服务框架，是阿里巴巴的开源项目，现交给apache进行维护Dubbo致力于提高性能和透明化的RPC远程服务调用方案，以及SOA服务治理方案。

2023-01-31 09:22:09 848

原创已解决：无法解析 jdk.tools:jdk.tools:1.6

## 解决方案 1. 经过一番查找和尝试呢，我这边提供三个不同的解决方案。 **第一种解决方案：（强烈不建议！）**，不要尝试，容易挨骂。。。。。 1. 这个依赖出问题了对吧，直接把他排除掉！谁有问题解决谁！ 2. 具体的解决方案如下：排除这个`jdk.tools`依赖！ ```css org.apache.hbase hbase-client

2023-01-15 12:49:54 973

原创 Linux环境下安装JDK和Tomcat

（有则卸载，没有就不用），注意版本可能会有些不一样，以实际操作的为准。一般Centos7会默认安装OpenJDK,需要先把这个删除了。修改权限，参数“为你自己上传的jdk安装文件名字”解压上传的jdk压缩包。上传到java目录下。

2023-01-14 09:23:27 494

原创 Linux环境下配置Nginx

openssl是一个强大的安全套接字层密码库，nginx不仅支持http协议，还支持https,所以需要在linux上安装openssl库。：nginx中的http模块使用pcre解析正则表达式，所以需要在linux上安装pcre库。:nginx使用zlib对http包的内容进行gzio,所以需要安装此包。出现上述问题是因为 yum 在锁定状态中，强制关掉yum进程就可以了。Nginx是C语言编写的，所以需要配置C语言编译环境（要联网）进入到 sbin目录,执行 nginx 命令。

2023-01-12 14:31:51 366

原创已解决：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask

## 问题描述 1. 今天在跑hive sql的时候，报错;FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask【从hive log找到的错误提示】，蛮无语的，也看不出啥原因导致的。。。 2. 在网上查了蛮久的，找到一个解决方案 ## 解决方案【[参考方案](https://blog.csdn.net/decsjdz/article/details/94561573)】 1. 参考错

2023-01-08 15:21:10 3688 2

原创已解决：TypeError: Cannot read properties of undefined (reading ‘name‘ )

@[toc] ## 错误描述 TypeError: Cannot read properties of undefined (reading ‘name‘ ) 1. 这个错误在前端中蛮常见的，一般都是提示的这个属性没写对，但是呢，如果仅仅是这么一个简单的错误，也没必要特意写个博客记录一下 2. 这个错误呢，最常见的解决方式就是查看他提示这个“name”，看看哪个地方写错了 ## 解决方案 1. 我是在对接口返回值做处理的时候遇到的，简单的来说，就是我需要对接口返回的某个值做处理，如下所示： ```

2023-01-03 18:11:27 6480

原创已解决：org.springframework.cloud.client.discovery.EnableDiscoveryClient 不存在

PS:为什么清除缓存有用，我认为是这种的，创建项目索引，大型项目在创建索引的过程中可能会出现依赖没有正常加载的问题！并且，IDEA 的缓存和索引主要是用来加快文件查询的速度，但是如果你的缓存和索引在新加入依赖后没有更新或者这部分内容没有正常加载，这时候你启动项目就会出现第二种原因，依赖是正常的，但是就是报错！针对我遇到的导致问题的第二种原因，经过测试有两种解决问题的方式！将项目交给maven管理，但是有可能会导致其他的问题！错误，这个错误蛮奇怪的，有必要记录一下。在IDEA中，清空缓存。

2022-12-30 14:19:05 1933

原创已解决：上传文件时因Nginx导致的No ‘Access-Control-Allow-Origin‘ header is present on the requested resource.

## 问题描述 1. 这个看起来像是普通的跨域，但是导致跨域的原因是Nginx的原因 2. 我这边需要实现文件上传的阿里云oss，采用了Nginx，在检查了一遍前后端后，没有发现错误，跨域也是正常配置的 ## 导致问题的原因 1. nginx默认上传文件大小有限制的，我这边上传的文件比较大，约了160M左右，但是Nginx默认限制上传文件大小为1M，所以我这边是因为上传大文件超时了，然后爆了跨域！ ## 解决方案修改nginx的参数：nginx.conf，加上这行配置（两个位置）

2022-12-28 11:17:29 446

原创已解决：SpringBoot启动报错：Unable to start web server； nested exception is org.springframework.boot.web

查了一些解决方案，但是最后发现这个报错是因为：在pom引用了jackson相关包，但没有引用完整导致的。这个Jackson 是当前用的比较广泛的，用来序列化和反序列化 json 的 Java 的开源框架。

2022-12-18 13:34:38 19667

原创 Windows 10下部署Java环境——jdk1.8.0_301版本

@[TOC]## JDK安装JDK1.8.0_301版本资源：[https://download.csdn.net/download/qq_43408367/87061076?spm=1001.2014.3001.5503](https://download.csdn.net/download/qq_43408367/87061076?spm=1001.2014.3001.5503)安装步骤参考：[Windows 10下部署Java环境——JDK 11.0.2版本](https://blog.cs

2022-11-17 18:24:39 1232

原创今天1024，写一首起风吧

不得真假不做挣扎不惧笑话。不知抚摸的是故事还是段心情。也许期待的不过是与时间为敌。不做真假不做挣扎不惧笑话。你的眼中明暗交杂一笑生花。不剩真假不做挣扎无谓笑话。也甘愿赴汤蹈火去走它一遍。也甘愿赴汤蹈火去走它一遍。心之所动且就随缘去吧。逆着光行走任风吹雨打。心之所动且就随缘去吧。措不及防闯入你的笑颜。我曾难自拔于世界之大。措不及防闯入你的笑颜。我曾难自拔于世界之大。晚风吹起你鬓间的白发。暮色遮住你蹒跚的步伐。画中的你低着头说话。心之所动就随风去了。以爱之名你还愿意吗。

2022-10-24 10:30:01 80

原创解决：连接MySQL的10060错误:Can‘t connect to MySQL server on ‘...‘(10060)

加了3306端口之后可以测一下了，如果显示不允许连接，那么开启mysql ，使用root登录，进入mysql数据库，查询mysql.user这张表，可以看到HOST,是localhost，表示只能本地登录mysql，3306端口开了，但是3306端口没有被监听！第一步：检查网络配置呗，能不能ping上客户机。,再重启下mysql数据库，接下来就可以正常登录了。

2022-10-13 15:13:39 2898

原创已解决：源 “MySQL 5.7 Community Server“ 的 GPG 密钥已安装，但是不适用于此软件包。请检查源的公钥 URL 是否配置正确和报错：`ERROR 1045 (28000

@[toc]## 问题描述1. 服务器上安装mysql时出现了报错，简单记录下解决方案 ```cpp 源 "MySQL 5.7 Community Server" 的 GPG 密钥已安装，但是不适用于此软件包。请检查源的公钥 URL 是否配置正确。失败的软件包是：mysql-community-client-5.7.40-1.el7.x86_64 GPG 密钥配置为：file:///etc/pki/rpm-gpg/RPM-GPG-KEY-mysql ```2. 执行：`rp

2022-10-13 14:05:47 5610 2

原创解决：ping: www.baidu.com: 未知的名称或服务

1. 搭建的centos7环境，配置完网络后，出现ping: www.baidu.com: 未知的名称或服务.3. 重启下：`service network restart` ```cpp [root@localhost network-scripts]# service network re```cpp[root@localhost mysql]# ping www.baidu.comping: www.baidu.com: 未知的名称或服务[root@localhost mysql]#

2022-10-13 12:58:38 1080

原创 IntelliJ IDEA 2021.1 使用git提交代码时，提交信息无法输入中文问题解决方法

【代码】IntelliJ IDEA 2021.1 使用git提交代码时，提交信息无法输入中文问题解决方法。

2022-10-12 15:00:36 753

原创 HBuilder 下运行uniapp（微信小程序）时，微信开发者工具进入游客模式

在HBuilder 运行到小程序模拟器（微信开发者工具）当微信开发者工具提示是游客模式时，可以在微信开发者工具详情中修改 AppId，如果没有的话，可以自己注册一下，然后修改后就不是游客模式了

2022-10-10 11:56:31 1163

原创聊下应届生因疫情被迫推要入职的offer吧

最近都挺难的，我已经在家快二十天了，在这十几天中，我也是顺利拿到了几个offer，然后选好了这一家公司，本来要入职的一家名叫，infosys，应届生的岗位，但是因为疫情原因，导致我这边县城的道路被封闭了，当时特意请了朋友开车送我去县城的，然后到了进入县城的路口，路口被封闭了，然后有防疫人员在守着，说是县城的内部道路封闭了，即使开车能经过这个路口，也不一定能到火车站，我问他是从什么时候开始，到什么时间结束，人家说要等上面的指示，我表示理解，现在老家疫情这么厉害，政策上确实比较严谨。

2022-08-21 12:39:47 204

原创 linux分区扩容

倒霉倒霉，我搭建的本地测试集群的一个节点的预先分配存储空间不够用了，没办法扩容呗。首先在VM中扩展磁盘容量（把快照全部删除，有快照的不能扩展）

2022-08-09 22:14:47 117

原创关于我因为疫情影响从而被迫关在了家中后开启了漫长的学习计划保证自己不变成FW的点点滴滴

我承认我不是一个天资聪慧的人，甚至在某方面我还有些愚笨，我从不刻意的去背一些什么，通常来说，我喜欢理解，喜欢写笔记，喜欢在CSDN写写博客，记录一下自己的行为，强迫自己不停的学习。先介绍一下我自己吧，我呢，是一个在上海漂了一年的菜鸟，工作了一年，基本上也是属于什么都做过了，也做了几个项目，这不是今年上海疫情，从二月关到了七月中，人都被关傻了，屋漏偏逢连夜雨，干了一年的公司，资金紧张，刀我了，回想一下在公司干的一年的点点滴滴，氛围还是十分的和谐，作为一个没有多少社会经验的毕业生，我算是受到了很多很多的优待。.

2022-08-09 18:03:44 89

阿里云 VODUploadDemo-java-1.4.15 资源

jdk1.8.0-301版本安装包

jdk-11.0.2版本安装包

解决JDBC连接SQL_Server数据的办法

Linux安装.docx

空空如也