Spark
关注
分享
扫一扫
我会陆续把自己学习Spark的笔记发布在这个博客，希望大家喜欢。内容会包括scala，spark core离线计算，spark sql，spark stream流式计算，kafka分布式消息队列，storm流式框架。
bigzqq
这个作者很懒，什么都没留下…
展开
-
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的match ，case class，actor
问题集锦：01目录正文01match这个比较简单，如下package com.bjsxt.scala/** * 1. _=>是模式匹配中的默认匹配，放在最后 * 2. 模式匹配不仅可以匹配值还可以匹配类型，使用时需要在类型前加一个形式变量。 * 3. 匹配过程中会有值的自动转换，注意类型是不会转换的，比如如果值为1.0 那么不会和Int匹配。 */obje...原创 2019-04-02 20:40:56 · 310 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的String，集合和Trait（06）
问题集锦目录目录1.String2.集合3.trait正文知识点和代码都在黑色的框子中1.Stringscala中的String类用的就是java 中的String这个类。如果有所不同，那就是scala还重写了几个方法罢了。object Lesson_String { def main(args:Array[String])={ val bu...原创 2019-03-27 16:00:36 · 298 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala函数（04,05）
问题集锦正文 /** * 递归函数 * 递归函数必须制定函数的返回值类型 */ def fun(num:Int) :Int = { if(num == 1) num else{ num * fun(num - 1) } } println(fun(3))...原创 2019-03-24 22:03:00 · 169 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala初始/类和对象（01,02,03）
问题集锦01正文01scala与spark scala是spark内核的实现语言，版本对应是这样的spark1.6 对应 scala 2.10实际上scala的更高版本也是可以的。spark1.6需要运行在java1.7上，python2.6上。java1.6到java1.7增添了maven包管理器，java1.7到java1.8增加了lamda表达式。02 scala与j...原创 2019-03-23 19:37:18 · 203 阅读 · 0 评论