scala
文章平均质量分 62
终极量化数据
十多年.Net,Java后台开发经验,丰富的python爬虫和数据分析能力,专注于研究大数据和人工智能技术,理论,架构与原型实现,每周分享技术干货。同时致力于python量化投资分析,欢迎关注,一起做技术研究和交流。
个人原创公众号「 猫头鹰数据分析 」,更新技术干货,欢迎关注!!!
展开
-
最新版Flink1.14.0集群超详细部署及测试
Flink在9月份发布了最新版Flink1.14.0,新版本中 Flink 一个主要变化是集成的流媒体和批处理体验,此外,在 SQL API、更多连接器支持、检查点和 PyFlink 等方面也带来了许多新功能和改进。更多详细内容,点击1.14.0 发布公告GitHub 地址:https://github.com/apache/flink参考链接:Apache Flink: Apache Flink 1.14.0 Release Announcement 正好我的Flink环境需要重...原创 2021-10-21 11:25:45 · 7832 阅读 · 2 评论 -
大数据分析学习第十三课 实战使用Idea创建java程序运行spark的wordcount
开发工具:Intellij IDEAJava版本:JDK1.8以上在pom.xml文件中添加我们需要的jar包:spark-core<!--定义spark版本--><properties> <spark.version>2.2.3</spark.version></properties><!--spark-core核心包--><dependency> <groupId&原创 2021-07-30 20:02:35 · 574 阅读 · 0 评论 -
idea运行spark程序报错scalac: Error: illegal cyclic inheritance involving trait Iterable
执行一个spark的scala写的类,报错scalac: Error: illegal cyclic inheritance involving trait Iterablescala.reflect.internal.Types$TypeError: illegal cyclic inheritance involving trait Iterable我们打开idea项目的Project Structure选项,找到这里scala的sdk版本我用的最新的,看样子是不兼容造成的,我们最好.原创 2021-07-30 10:19:05 · 3424 阅读 · 1 评论 -
spark3.1.2运行scala报错: Exception in thread “main“ java.lang.ArrayIndexOutOfBoundsException: 28499
在用idea执行scala的类,报以下错误Exception in thread "main" java.lang.ArrayIndexOutOfBoundsException: 28499这个查找资料后,是由于我们没有引用paranamer,我们只要在pom文件中加上引用就可以解决了<dependency> <groupId>com.thoughtworks.paranamer</groupId> <artifactId>par原创 2021-07-30 10:08:45 · 1235 阅读 · 4 评论