数据开发
文章平均质量分 74
The_Singing_Towers
这个作者很懒,什么都没留下…
展开
-
scala 报错:error compiling the sbt component ‘compiler-interface-2.11.8-56.0‘
SBT 与 JDK 版本不兼容,参照SBT和JDK 版本对应关系配置.原创 2022-12-05 22:41:02 · 3484 阅读 · 1 评论 -
Flink流:监听RabbitMq(Json)写MySQL
RabbitMqErlang环境安装RabbitMQ代码是使用Erlang编写的,需要安装Erlang环境下载安装erlang官网地址:https://www.erlang.org/downloads检查系统环境变量为了稳定,安装完后要检查一下系统的环境变量,如果没有自动写入需要自行手动配置;操作过程:此电脑(鼠标右键)__属性__高级系统设置__环境变量__新建__系统环境变量变量名:ERLANG_HOME变量值:Erlang的根路径然后添加到 path操作过程:选中Path原创 2022-01-27 17:30:44 · 4060 阅读 · 2 评论 -
数据开发:Spark算子
Action (行动)算子foreachforeach 对RDD中的每个元素都应用传入的函数进行操作,不返回RDD和Array,而是返回Unitval source:RDD[String] = sc.textFile(".\\datas")val result_string:RDD[String] = source.map(x=>(x))// 打印RDD中每个元素result_string.foreach(println)countcount 返回整个RDD的元素个数va原创 2022-01-20 19:34:28 · 1973 阅读 · 0 评论