scala
Begonia_sea
这个作者很懒,什么都没留下…
展开
-
RDD特性理解
RDD特性及其实现特性的方法1.数据来之后需要知道数据应该放在哪个分区,标记数据是哪个分区的 。getpartitions()2.之后需要对数据进行操作,(执行一些计算逻辑)。compute()3.在操作数据的时候需要对数据进行变换此时就需要shuffle 可能把多个分区变少的分区也有可能由少分区到多的Prtitioner (相当于管理者)来管控这个事控制分区的数据流向。4.而我们RDD是具有弹性的,新的RDD 损坏或出错了 可以由前一个RDD重新计算得到 故而需要记录它是谁的子类是从哪原创 2020-09-23 14:22:00 · 299 阅读 · 0 评论 -
Scala中权限访问
Scala中权限访问(1)Scala 中属性和方法的默认访问权限为public,但Scala中无public关键字。(2)private为私有权限,只在类的内部和伴生对象中可用。(3)protected为受保护权限,Scala中受保护权限比Java中更严格,同类、子类可以访问,同包无法访问。(4)private[包名]增加包访问权限,包名下的其他类也可以使用package com.keda.daysourceobject AacsseTest {//伴生对象 def main(args:原创 2020-09-15 20:03:41 · 800 阅读 · 1 评论