【无标题】

import sys
from random import random
from operator import add

from pyspark.sql import SparkSession


if __name__ == "__main__":
    """
        Usage: pi [partitions]
    """
    spark = SparkSession\
        .builder\
        .appName("PythonPi")\
        .getOrCreate()

	# sys.argv: 获取命令行列表第1个参数
    partitions = int(sys.argv[1]) if len(sys.argv) > 1 else 2
    n = 100000 * partitions

    def f(_: int) -> float:
    	
    	# random.random() 随机生成一个在[0,1)的数,x,y分别为[-1,1)的随机数
        x = random() * 2 - 1
        y = random() * 2 - 1
        # 如果在圆内就返回1,否则0
        return 1 if x ** 2 + y ** 2 <= 1 else 0
	
	# partitions表示分区数量
	# 1. 先创造一个分布式数据集,范围是从1到n+1
	# 2. map表示将每一个元素映射到f函数,这里指生成100000个随机数,其中点落在圆里面表示1,在外面表示0
	# 3. reduce(add)表示将这些1相加
	count = spark.sparkContext.parallelize(range(1, n + 1), partitions).map(f).reduce(add)
    print("Pi is roughly %f" % (4.0 * count / n))

    spark.stop()
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值