- 博客(6)
- 收藏
- 关注
RSS订阅原创 2021-02-28
***Spark***简介Spark最初由美国加州大学伯克利分校（UC Berkeley）的AMP实验室于2009年开发，是基于内存计算的大数据并行计算框架，可用于构建大型的、低延迟的数据分析应用程序。2013年Spark加入Apache孵化器项目后发展迅猛，如今已成为Apache软件基金会最重要的三大分布式计算系统开源项目之一。特点①运行速度快：使用DAG执行引擎以支持循环数据流与内存计算。②容易使用：支持使用Scala、Java、Python和...
2021-02-28 11:57:57
207
原创 python5
一.异常异常即是一个在程序执行过程中发生，影响了程序的正常执行的事件。一般情况下，在Python无法正常处理程序时就会发生一个异常。BUG 臭虫.错误. debug 调试；当Python脚本发生异常时我们需要捕获处理它，否则程序会终止执行。即便 Python 程序的语法是正确的，在运行它的时候，也有可能发生错误。运行期检测到的错误被称为异常。python提供了两个非常重要的功能来处理异常处理 :让程序不报错.(不终止运行,可以提示错误,记录进错误日志)断言(Assertions) : 在需要
2020-12-05 14:48:37
100
原创 python2
1 函数格式定义函数的格式：其中，def 和 return 为关键字。注意： 函数缩进后面的语句被称为是语句块，缩进是为了表名语句的逻辑与从属关系。缩进这个问题不能忽视，否则会导致代码无法成功运行，这里需要特别注意。2 函数参数③不定长参数有时我们在设计函数接口的时候，可会需要可变长的参数。也就是说，我们事先无法确定传入的参数个数。Python 提供了一种元组的方式来接受没有直接定义的参数。这种方式在参数前边加星号 * 。如果在函数调用时没有指定参数，它就是一个空元组。我们也可以不向函数传递未
2020-12-05 14:26:59
75
原创 python4
模块什么是模块，模块就是所有的以.py后缀结尾的文件都是模块。我们可以在模块中定义好函数、变量、类、数据等内容。模块可以被别的程序引入，以使用该模块中的函数功能当我们在一个.py文件中想调用模块实现功能时，需要用import或者form…import导入相关的模块(一个模块只会被导入一次，不管执行多少次import)在模块被调用执行后会自动被Python解释器编译成二进制文件,用于对模块加速执行。在 pycache 目录下创建 模块名.cpython-版本.pycOS模块文件操作方法os.re
2020-12-01 16:53:57
71
原创 python3
模块：.py文件，所有的python脚本都可以作为python模块被调用的。_name_属性1）一个模块被另一个程序第一次引入时，程序将被运行；2）用_name_属性来使用该程序块仅在该模块自身运行时执行。pip常用命令1）查找软件#pip search Package2）安装软件#pip install Package#pip install -r xxx.txt3)更新软件#pip install -u Package4)卸载软件#pip uninstall Package包:本质就是
2020-11-20 17:20:57
355
1
原创 2020-11-03
函数(1)函数是一段具有特定功能，被封装，可重复使用的语句块，通常用来实现某一特定功能。(2)自定义函数；通过def关键字定义格式：def函数名(参数)：语句块(函数体)(3)形参和实参定义函数时，在函数名后圆括号内的参数叫形参调用函数时，可以通过参数给函数传值，通过参数赋值的过程叫做传参调用函数时这个参数就叫实参(4)返回值：将函数中的局部变量传递到函数外部。（返回值是函数的一部分，即使不设置，依然也有返回值）。使用 return 语句实现，当函数中没有return时，默认返回值是Non
2020-11-03 17:25:16
91
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人