大数据学习23:Spark:大数据的计算引擎(Scala开发环境安装)

第一部分:Scala编程语言
第二部分:Spark Core内核(最重要的内容)—> 概念RDD:相当于MapReduce
第三部分:Spark SQL:相当于Hive,也支持SQL语句 -----> 底层依赖Spark Core ----> 依赖RDD
第四部分:Spark Streaming:相当于Storm用于流式计算 - ----> 底层依赖Spark Core ----> 依赖RDD
注意:但是Spark Streaming不能做到实时性很高

第一章:Scala基础

一、Scala简介:多范式的编程语言

1、多范式:支持面向对象、支持函数式编程
2、底层依赖JVM

二、安装配置Scala、常用的开发工具

1、安装配置
	版本:2.11.8版本跟Spark的版本一致(spark-2.1.0-bin-hadoop2.7.tgz)
	      scala-2.11.8.zip(Windows)
	      scala-2.11.8.tgz(Linux)
		  
	以windows为例:类似JDK的安装
		(1)解压: C:\Java\scala-2.11.8
		(2)设置SCALA_HOME: C:\Java\scala-2.11.8
		(3)把%SCALA_HOME%/bin加入PATH路径
		(4)执行: scala -version
		
2、常用开发工具
	(1)REPL:命令行
			   退出: :quit
	
	(2)IDEA:
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值