常见问题
记录日常工作和学习中遇到的各种问题
ustbxyls
这个作者很懒,什么都没留下…
展开
-
docker创建镜像,常见报错
1.Error: Cannot find a valid baseurl for repo: base参考:https://www.jianshu.com/p/8c3f0004e06ahttps://blog.csdn.net/liu251890347/article/details/41281263但是要把From centos注释掉,否则相当于新起了一个环境,前面不在起作用...原创 2019-11-05 14:54:24 · 6419 阅读 · 2 评论 -
本地ToolRunner调试MapReduce,报错org.apache.hadoop.crypto.key.KeyProviderTokenIssuer
参考: https://blog.csdn.net/qq_39625998/article/details/80356159报错org.apache.hadoop.crypto.key.KeyProviderTokenIssuer原来是版本问题,原来Hadoop版本为2.7.2,确实没有这个类。将hadoop版本升级为3.10即可正常运行。...原创 2019-12-20 17:39:17 · 3454 阅读 · 0 评论 -
MapReduce任务报错:Unrecognized Hadoop major version number: 3.0.0-cdh6.2.1
问题描述: 之前写了一个读取RCFile的MapReduce任务,现在放到测试集群上报错了错误信息:Error: java.lang.IllegalArgumentException: Unrecognized Hadoop major version number: 3.0.0-cdh6.2.1at org.apache.hadoop.hive.shims.ShimL...原创 2019-11-29 20:44:37 · 11888 阅读 · 2 评论 -
Mac上Spark本地模式调试报错-no snappyjava in java.library.path
Idea本地运行Spark,SparkContext.textFile()读取文件时报错,具体报错:Caused by: java.lang.UnsatisfiedLinkError: no snappyjava in java.library.pathat java.lang.ClassLoader.loadLibrary(ClassLoader.java:1867)...原创 2019-11-19 15:20:28 · 4288 阅读 · 0 评论 -
MapReduce输出avro文件,报错GenericData.createDatumWriter...NoSuchMethodError
Hadoop 2.7.2<dependency> <groupId>org.apache.avro</groupId> <artifactId>avro</artifactId> <version>1.7.7</version></dependency><...原创 2019-12-20 17:37:44 · 339 阅读 · 0 评论 -
JavaScript: Uncaught SyntaxError: Invalid or unexpected token
把上面的html代码直接保持为html文件,双机打开后,发现并没有连接到服务端的WebSocket上;打开F12,可以看到在Console标签下有错误信息:Uncaught SyntaxError: Invalid or unexpected token (at front.html:14:12)今天测试WebSocket功能,Client端:使用Html+JavaScript,通过浏览器解析后,当做客户端;刷新页面,看到可以正常连接到服务端了。好久没有碰前端的代码了。修改为英文等号,即可;原创 2024-05-22 16:33:15 · 226 阅读 · 0 评论 -
项目中多个版本依赖冲突问题:Caused by: java.lang.ClassNotFoundException: com.fasterxml.jackson.annotation.JsonMerg
在2.6.7这个数据上,右键选择【Open Library Settings】,然后点击-号,进行删除。只要根据报错信息,把2.13.5版本依赖加进去就可以了。我们会看到提示,哪个模块使用了这个依赖,点击ok后,再次运行,会有对应代码会报错,我这里就是,再次运行代码,就ok了。原创 2024-04-29 15:47:05 · 512 阅读 · 0 评论 -
idea添加scala库,src\main\scala‘ is duplicated in module ‘XXX‘.
具体来说,src\main\scala目录被多次标记为Scala源代码目录。导航到 "File" > "Project Structure" 或者使用快捷键 "Ctrl+Alt+Shift+S" 打开项目结构对话框。我这边缺失有两个src\main\scala,这是因为我创建scala目录的时候,手动mark as source了。BTW:上面的解决方法,是我搜索时,百度的大模型自动给出的答案,有时这个答案还是可以的。点击 "Apply" 应用更改,然后点击 "OK" 关闭对话框。原创 2024-04-29 15:13:37 · 1492 阅读 · 0 评论 -
运行flink-runtime_2.11_1.11.2报错:java.base does not export sun.net.util to unnamed module @0x1a407d53
【代码】运行flink-runtime_2.11_1.11.2报错:java.base does not export sun.net.util to unnamed module @0x1a407d53。原创 2024-05-10 10:39:29 · 467 阅读 · 0 评论 -
Java中String进行split的注意事项
常见String进行split的方法有:1. JDK中String对象自带的split方法,public String[] split(String regex)2. commons-lang包中StringUtils提供的splitPreserveAllTokens方法, public static String[] splitPreserveAllTokens(String str, ...原创 2020-11-16 17:15:05 · 713 阅读 · 0 评论 -
Java中String进行split的注意事项
常见String进行split的方法有:1. JDK中String对象自带的split方法,public String[] split(String regex)2. commons-lang包中StringUtils提供的splitPreserveAllTokens方法, public static String[] splitPreserveAllTokens(String str, ...原创 2019-10-22 14:31:37 · 10268 阅读 · 3 评论 -
java: Arrays.ArrayList.add 报错java.lang.UnsupportedOperationException
环境:jdk1.8在Java中,使用java.util.ArrayList类时,由于java.util.ArrayList的构造器没法传入数组或者list进行初始化,所以我们常用Arrays.asList()方法来进行List的初始化和测试。使用Arrays.asList()初始化后,但在后续的使用中按照ArrayList的方法去操作经常会遇到很多坑。。。如下代码:public st...原创 2019-10-22 10:17:44 · 10035 阅读 · 0 评论 -
Jackson序列号Avro文件报错:com.fasterxml.jackson.databind.JsonMappingException: Not a union
环境:jdk 1.8avro和jackson的maven依赖如下:<dependency> <groupId>org.apache.avro</groupId> <artifactId>avro</artifactId> <version>1.7.4</ver...原创 2019-10-21 11:03:11 · 10328 阅读 · 0 评论