大数据
bigzqq
这个作者很懒,什么都没留下…
展开
-
idea+spark+scala+hadoop
出现的问题是: 1、https://www.cnblogs.com/sos-blue/p/4956404.html 2、https://blog.csdn.net/songhaifengshuaige/article/details/79480491 3 配置maven https://blog.csdn.net/xing122587709/article/details/81153144...原创 2019-01-30 11:22:18 · 371 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala函数(04,05)
问题集锦 正文 /** * 递归函数 * 递归函数必须制定函数的返回值类型 */ def fun(num:Int) :Int = { if(num == 1) num else{ num * fun(num - 1) } } println(fun(3))...原创 2019-03-24 22:03:00 · 168 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala初始/类和对象(01,02,03)
问题集锦 01 正文 01scala与spark scala是spark内核的实现语言,版本对应是这样的spark1.6 对应 scala 2.10实际上scala的更高版本也是可以的。spark1.6需要运行在java1.7上,python2.6上。java1.6到java1.7增添了maven包管理器,java1.7到java1.8增加了lamda表达式。 02 scala与j...原创 2019-03-23 19:37:18 · 201 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的String,集合和Trait(06)
问题集锦 目录 目录 1.String 2.集合 3.trait 正文 知识点和代码都在黑色的框子中 1.String scala中的String类用的就是java 中的String这个类。如果有所不同,那就是scala还重写了几个方法罢了。 object Lesson_String { def main(args:Array[String])={ val bu...原创 2019-03-27 16:00:36 · 296 阅读 · 0 评论 -
idea+spark+hadoop+scala+maven环境配置
1总的参考顺序: https://blog.csdn.net/songhaifengshuaige/article/details/79480491 这份参考更加详细:https://blog.csdn.net/yiluohan0307/article/details/79568363 2 测试程序: https://blog.csdn.net/yiluohan0307/article/d...原创 2019-01-30 21:38:03 · 850 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的match ,case class,actor
问题集锦: 01 目录 正文 01match 这个比较简单,如下 package com.bjsxt.scala /** * 1. _=>是模式匹配中的默认匹配,放在最后 * 2. 模式匹配不仅可以匹配值还可以匹配类型,使用时需要在类型前加一个形式变量。 * 3. 匹配过程中会有值的自动转换,注意类型是不会转换的,比如如果值为1.0 那么不会和Int匹配。 */ obje...原创 2019-04-02 20:40:56 · 308 阅读 · 0 评论