- 博客(6)
- 收藏
- 关注
原创 2021-03-03
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架。Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是——Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。Spark 框架核心组件,以及Spark和Had
2021-03-03 10:13:13 153
原创 2020-11-25
Python生成随机数的方法random.random()用于生成用于生成一个指定范围内的随机符点数,两个参数其中一个是上限,一个是下限。如果a > b,则生成随机数1、n: a <= n <= b。如果 a <b, 则 b <= n <= a。1、print random.uniform(10, 20)2、print random.uniform(20, 10)3、#----4、#18.73566065265、 #12.57982980226、 ran
2020-11-25 20:45:54 76
原创 第四
模块,包模块Python中的模块是一个 .py 文件内部可以包含定义好的函数、变量、类、数据、执行的功能可以用作内置模块,自定义模块,第三方模块(使用原因)调用模块可以简化开发,减少代码量(怎么使用)使用“import 模块名”或“from 模块名 import 函数名,变量名,类名”:import 模块名:无论执行了多少次import,一个模块只会被导入一次。这样防止导入模块被一一遍又一遍的执行from 模块名 import 函数名/变量名/类名 (as 别名)from 模块名 import * :把一
2020-11-22 18:09:52 70
原创 第三次
一、装饰器函数1、装饰器函数:①不修改其他函数代码。②给其他函数增加或修改功能的函数。2、装饰器函数是高阶函数。3、功能:①它将原函数作为参数。②一般在装饰器中需要定义一层或两层内部函数。③原函数需要在装饰器内部的函数中执行。④将内部函数作为返回值返回。4、装饰器函数 装饰器语法糖func =log_info(func)(“_”表示是内部函数,是自己用的函数,要想让外部用要用return)5、装饰器的应用场景:①给大量函数增加相同功能时。②日志装饰器、测试装饰器、功能增强。6、带参装饰器案例:测试函数运行
2020-11-22 18:07:15 47
原创 2020-11-11
模块模块是一个包含所有定义的函数和变量的文件,其后缀名是 .py 。模块可以被别的程序引入,以调用该模块中的函数等功能。这也是使用 python 标准库的方法。import 语句想要引用模块,只需要执行import语句就可以了。我们来看个示例。Filename: printHello.pydef hello( name ):print ("Hello : ", name)新建一个 printHello.py 的文件,写入一个 hello 的函数。这个文件就是一个模块。Filename: test.py#导
2020-11-11 18:30:11 56
原创 2020-11-04
python特点1、简单灵活2、 开源免费3、 跨平台4、 高级动态5、 支持命令式编程6、函数式编程7、 面向对象编程基本数据类型标准数据类型:数字(Number)、字符串(String)、列表(List)、元组(Tuple)、集合(Set)和字典(Dictionary);(1):不可变数据:Number(数字)、String(字符串)、Tuple(元组);(2):可变数据:List(列表)、Dictionary(字典)、Set(集合)。函数的定义:def <函数名>
2020-11-04 19:58:42 47
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人