高阶导数-CSDN博客

原创 [ERROR] /home/hadoop/Desktop/bin/spark/mycode/kafka/src/main/scala/KafkaWordCount.scala:5: error: ob

此外，还需要把“/usr/local/kafka/libs”目录下的kafka-clients-2.6.0.jar文件复制到Spark目录的jars目录下。我在做实验的时候，明明已经添加spark-streaming-kafka-0-10_2.12-3.2.0依赖了，还是报错，后面发现是版本不兼容，我用的spark版本是spark3.2.1，但是我下载的spark-streaming-kafka用的spark版本是3.2.0的所以一直报错，我的spark版本是3.2.1，Scala是2.12.16。

2024-06-15 16:23:28 277

原创 [ERROR] value createStream is not a member of object org.apache.spark.streaming.kafka010.KafkaUtils

这通常是因为你使用的 Spark Streaming Kafka 连接器版本与你期望的版本不一致。在 Spark Streaming Kafka 0.10+ 集成中，需要使用。方法已被弃用，并在 Spark 3.x 中被完全移除。实际上不是一个需要直接引用的对象。遇到的错误是因为在代码中使用了。在 Spark 2.x 中，

2024-06-15 16:07:59 130

原创 [ERROR] Failed to execute goal org.scala-tools:maven-scala-plugin:2.15.2:compile (default) on projec

是一个较老的 Maven 插件，用于支持 Scala 项目的编译，但它可能不再与最新的 Maven 或 Scala 版本兼容。确保你正在使用的 Maven 版本与你的插件和依赖兼容。较新的 Maven 版本可能包含重要的修复和改进。，请查看其文档以了解支持的 Scala 版本。这个错误通常意味着 Maven 在尝试使用。确保你的项目中使用的 Scala 版本与。来编译 Scala 项目时失败了。

2024-06-15 16:00:45 338

原创 zookeeper is not a recognized option

还要改localhost:9092就可以运行了，完整命令： ./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic wordsendertest --from-beginning。输入这个命令./bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic wordsendertest --from-beginning。

2024-06-14 20:12:29 122

原创 Error during job, obtaining debugging information...FAILED: Execution Error, return code 2 from org

因为我试了其中的两三种解决办法，然后把Hadoop，hive，MySQL都重启一次，进入hive，突然可以插入一条数据，但是，等我插入第二条的时候又不行了，然后我又全都重启一遍，还是不行，但是！在hive中插入数据，结果报错如下：Error during job, obtaining debugging information...FAILED: Execution Error, return code 2 from org。看了别人解决的方法，不是很行，可能是因为软件，或者电脑的原因？

2024-06-02 21:45:11 328

原创关于transformers模块的BertTokenizer, BertModel下载和 huggingface-cli 命令行工具的使用

进入cd C:\Users\xxx\.cache\huggingface\hub这个目录后，下载 huggingface-cli download bert-base-chinese，这个过程需要的时间可能有点久，耐心等待。错误提示还建议检查本地是否有同名的目录，因为这可能会干扰从Hugging Face的模型仓库加载模型。第二：因为模型文件是从互联网上下载的，所以需要确保你的设备可以正常访问Hugging Face（但是由于 Hugging Face的模型仓库网站（第一：我检查了我的本地目录然而并没有。

2024-05-22 15:06:01 409

原创在Ubuntu下运行spark-submit 提交到spark中报错：Error: Failed to load class SimpleApp.2024-05-01 14:30:45,763 IN

确定代码没有问题，可以运行构建命令mvn clean package命令确保没有错误或警告，这可能会影响构建结果。然后再运行spark-submit提交就可以了。

2024-05-01 15:03:21 214 3

原创 Ubuntu解压zip，rar文件出错

安装rar文件：sudo apt install rar。然后zip解压后成rar文件，这里还要继续解压。我的压缩文件是zip，先下载。这里我用tar命令是错的。

2024-04-23 18:31:24 211

原创运行Java时，跳转网页报错：HTTP状态 404 - 未找到

记得先选定原有的tomcat，然后点左上方有一个“-”，再重新“+”选择tomcat。首先确定你的代码都没有错，运行了出现如上错误，可以重新选择tomcat。选择local，再修改这些地方就可以了。然后删除原有的tomcat。

2024-04-23 11:46:36 448

原创 ubuntu使用vim编辑时插入删除不了

首先，sudo apt update 命令用于更新你的软件包列表，确保你能安装最新版本的软件。然后，sudo apt install vim 命令将会安装Vim。安装完成后，你应该就能使用 vim word.txt 命令来编辑文件了。那是因为没有安装vim编辑器，以下是安装代码。

2024-04-22 21:46:39 182

原创 ubuntu运行java -version报错-bash: /home/hadoop/桌面/lib/jdk1.8.0_271/bin/java: cannot execute binary file:

环境什么的都配置好了，查看版本报错，后面发现是我的Ubuntu镜像是32位的，jdk是64的。可以使用一下代码查看版本。

2024-04-22 20:44:12 186 1

weixin_45998042的博客