- 博客(5)
- 收藏
- 关注
原创 Python函数参数传递的*args和**kwargs
*和**实际上真正的Python参数传递语法是*和**。*args和**kwargs只是一种约定俗成的编程实践。我们也可以写成*vars和**kvars。*args和**kwargs一般是用在函数定义的时候。二者的意义是允许定义的函数接受任意数目的参数。也就是说我们在函数被调用前并不知道也不限制将来函数可以接收的参数数量。在这种情况下我们可以使用*args和**kwargs。接下来我们...
2017-05-17 15:01:48 7472
原创 Spark流处理中的DStrem.foreachRDD()方法
Spark数据处理Spark作为分布式数据处理的一个开源框架,因其计算的高效性和简洁的API而广受欢迎。一般来说,Spark大部分时候被用来进行批处理。但现在Spark通过其SparkStreaming模块也实现了一定的流处理的功能。Spark流处理的过程Spark中的流处理实际上并不是真正的流处理。Spark实现流处理的方法是通过mini-batch来对输入数据进行分块(但这个分...
2017-05-14 10:30:07 3060
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人