spark--actions算子--collect

import org.apache.spark.{SparkConf, SparkContext}

/**
  * Created by liupeng on 2017/6/16.
  */
object A_collect {
  System.setProperty("hadoop.home.dir","F:\\hadoop-2.6.5")

  def main(args: Array[String]): Unit = {
    val conf = new SparkConf().setAppName("collect_test").setMaster("local")
    val sc = new SparkContext(conf)
    //准备一下数据
    val nameList : List[Int] = List(1,2,3,4,5)
    val numbers = sc.parallelize(nameList)
      .map(_ * 2)
    //将RDD序列化到driver端
    //建议用foreach action操作;collect在远程集群上遍历RDD的元素,将分布式的在远程集群里面的数据拉取到本地,如果数据量大,会走大量的网络传输,甚至有可能OOM内存溢出
    val doubleNumbers : Array[Int] = numbers.collect()
    for (num <- doubleNumbers)
      {
        println(num)
      }
  }
}
运行结果:

2
4
6
8
10

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
react-native-background-actions是一个用于在React Native应用程序中执行后台任务的库。它可以让我们在应用程序处于后台运行时继续执行一些指定的任务,可以提供一些额外的灵活性和功能。 该库允许我们定义后台任务,并在应用程序处于后台时进行执行。我们可以指定任务的周期性和间隔,例如每隔一段时间执行一次,或者在特定条件下执行任务。这使得我们可以在应用程序退出或处于后台运行时继续执行一些重要的操作,比如发送网络请求、数据同步或者计算任务。 与其他类似的库相比,react-native-background-actions有一些特点。首先,它支持Android和iOS平台,可以在两个平台上使用相同的代码。其次,它提供了一些配置选项,可以根据需要进行灵活的定制。例如,我们可以设置任务的优先级、间隔时间、最大运行时间等。还可以定义任务的入口点、参数和结果回调函数。 使用react-native-background-actions的步骤也相对简单。首先,我们需要安装库并链接到我们的项目中。然后,在需要的地方导入库并定义我们的后台任务。最后,我们可以通过调用相关的API来启动、停止或管理任务的执行。在任务运行时,我们也可以通过回调函数处理相关的事件和结果。 总之,react-native-background-actions是一个有用的库,可以使我们的React Native应用程序在后台运行时执行一些必要的任务。它提供了一些灵活的配置选项,可以根据需要定制后台任务的行为。无论是在数据同步、网络请求还是计算任务,这个库都可以帮助我们实现后台任务的处理。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

书灯

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值