自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 收藏
  • 关注

原创 Spark大数据处理讲课笔记1.7 掌握Scala类、对象、抽象类与特质

Scala的抽象类使用关键字abstract定义abstract class 类名 {(二)抽象类的特征抽象类不能被实例化。抽象类中可以定义抽象字段(没有初始化的字段)和抽象方法(没有被实现的方法),也可以定义被初始化的字段和被实现的方法。若某个子类继承了一个抽象类,则必须实现抽象类中的抽象字段和抽象方法,且实现的过程中可以添加override关键字,也可以省略。若重写了抽象类中已经实现的方法,则必须添加override关键字。(三)案例演示1、创建抽象类 - Person。

2023-06-16 16:29:35 233 6

原创 3.3 掌握RDD分区

在有些情况下,使用Spark自带的分区器满足不了特定的需求。例如,某学生有以下3科成绩数据:科目成绩chinese98math88english96chinese现需要将每一科成绩单独分配到一个分区中,然后将3科成绩输出到HDFS的指定目录(每个分区对应一个结果文件),此时就需要对数据进行自定义分区。

2023-05-08 09:19:38 138

原创 掌握RDD的创建3.1

【代码】掌握RDD的创建3.1。

2023-04-20 08:46:44 278

原创 掌握Scala内建控制结构1.5

Scala中继承了Java的异常机制,提供了程序中产生意外情况时处理的机制,抛出异常的过程和Java中基本一致,通过throw关键字进行:throw XxxException(),一旦抛出可以当场捕获处理或接着向上抛,捕获异常是通过 try-catch-finally来实现的。

2023-03-30 18:56:44 114

原创 掌握Scala运算符1.4

op运算符与.op方法调用是等价的,op……演示x + y与x.+(y)的等价性。

2023-03-26 16:11:09 48

原创 使用Scala集成开发环境1.3

启动IDEA,在欢迎界面中选择Configure→Plugins命令在上方的搜索框中搜索scala关键字单击绿色的【Install】按钮,安装完毕,单击绿色的【Restart IDE】按钮单击【Restart IDE】按钮,再次显示欢迎界面重复之前安装Scala的步骤,安装scalafmt插件。

2023-03-24 17:34:36 90

原创 Scala变量与数据类型1.2

定义变量需要初始化,否则会报错。定义变量时可以不指定数据类型,系统会根据初始化值自动推断变量的类型。

2023-03-24 16:42:06 52

原创 搭建Scala开发环境1.1

单击【scala-2.13.10.msi】超链接,将scala安装程序下载到本地。

2023-03-18 16:40:06 97

原创 【无标题】Java分析数据

Java统计文本单词数量

2022-12-10 18:30:13 330

原创 java连接HDFS

HDFS连接java

2022-11-20 17:40:40 1980

原创 【无标题】

HDFS

2022-11-14 14:35:05 532

原创 【无标题】

建立表单

2022-11-08 20:00:46 456

原创 【无标题】

finalshell

2022-09-29 16:32:18 308 1

原创 【无标题】

配置虚拟机,及常见问题处理

2022-09-26 14:21:56 145

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除