大数据
bigzqq
这个作者很懒,什么都没留下…
展开
-
idea+spark+scala+hadoop
出现的问题是:1、https://www.cnblogs.com/sos-blue/p/4956404.html2、https://blog.csdn.net/songhaifengshuaige/article/details/794804913 配置mavenhttps://blog.csdn.net/xing122587709/article/details/81153144...原创 2019-01-30 11:22:18 · 365 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala函数(04,05)
问题集锦正文 /** * 递归函数 * 递归函数必须制定函数的返回值类型 */ def fun(num:Int) :Int = { if(num == 1) num else{ num * fun(num - 1) } } println(fun(3))...原创 2019-03-24 22:03:00 · 164 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala初始/类和对象(01,02,03)
问题集锦01正文01scala与spark scala是spark内核的实现语言,版本对应是这样的spark1.6 对应 scala 2.10实际上scala的更高版本也是可以的。spark1.6需要运行在java1.7上,python2.6上。java1.6到java1.7增添了maven包管理器,java1.7到java1.8增加了lamda表达式。02 scala与j...原创 2019-03-23 19:37:18 · 193 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的String,集合和Trait(06)
问题集锦目录目录1.String2.集合3.trait正文知识点和代码都在黑色的框子中1.Stringscala中的String类用的就是java 中的String这个类。如果有所不同,那就是scala还重写了几个方法罢了。object Lesson_String { def main(args:Array[String])={ val bu...原创 2019-03-27 16:00:36 · 289 阅读 · 0 评论 -
idea+spark+hadoop+scala+maven环境配置
1总的参考顺序:https://blog.csdn.net/songhaifengshuaige/article/details/79480491这份参考更加详细:https://blog.csdn.net/yiluohan0307/article/details/795683632 测试程序:https://blog.csdn.net/yiluohan0307/article/d...原创 2019-01-30 21:38:03 · 839 阅读 · 0 评论 -
大数据---------spark体系之分布式计算---------scala分布式编程开发语言----------scala中的match ,case class,actor
问题集锦:01目录正文01match这个比较简单,如下package com.bjsxt.scala/** * 1. _=>是模式匹配中的默认匹配,放在最后 * 2. 模式匹配不仅可以匹配值还可以匹配类型,使用时需要在类型前加一个形式变量。 * 3. 匹配过程中会有值的自动转换,注意类型是不会转换的,比如如果值为1.0 那么不会和Int匹配。 */obje...原创 2019-04-02 20:40:56 · 303 阅读 · 0 评论