- 博客(6)
- 收藏
- 关注
原创 2021-02-28
Spark简介 Spark最初是由美国加州大学伯克利分校的AMP实验室在2009年开发,基于内存计算的大数据并行计算框架,可用于构建大型的、低延迟的数据分析应用程序 Spark主要特点: 1、运行速度快 2、容易使用 3、通用性 4、运行模式多样 Spark架构图: Spark生态: Spark生态系统: Spark的设计遵循“一个软件栈满足不同应用场景”的理念,逐渐形成了一套完整的生态系统 既能够提供内存计算框架,也可以支持SQL即席查询、实时流式计算、机器学习和图计算等 Spark可以部署在资源管理
2021-02-28 18:19:44
153
1
原创 2020-11-15
高阶函数: 满足一下条件之一的函数就是高阶函数 1、函数可以作为参数被传递 2、函数可以做为返回值输出 高阶函数例子: improt math def add(x,y,f): return f(x) + f(y) add(4,9,math.sqrt) # 5.0 常用的五个常用高阶函数 map函数: map()函数接收两个函数,一个是函数,一个是序列,map将传入的函数依次作用到序列的每个元素,并把结果作为新的list返回。 def f(x): return x * x map(f,[1,2,3,4,5
2020-11-15 22:09:53
90
原创 2020-11-15
函数: 对程序逻辑进行结构化或过程化的一种编程方式,写函数的目的是为了代码的重用。 def函数名([形参]):#定义函数 ‘’‘注释’’’ 函数体 函数名([实参]) #执行函数 函数的创建: def printlnfo(): print(’---------’) print(‘人生苦短,我用python’) print(’---------’) printlnfo()#执行函数 返回值: return 表示把程序流程从被调函数转向主调函数并把表达式的值带回主调函数,实现函数值的返回,返回时可附带一个返
2020-11-15 21:19:22
87
原创 2020-11-15
字典(散列表):是一种通过"键"来引用"值“的数据结构.字典中的值没有特殊的顺序,但都是存储在一个特定的键下,{“key” :None,“1” :“a”} 键可以是数字,字符串,也可以是元组 键只能是不可变数据类型 变量名 = {key:value} 创建字典 items = [(‘name’,‘Gumby’),(‘age’,42)] #将列表转换成字典 d = dict(items) print(d) 从字典中删除元素 adict = {‘name’:‘Ben’,‘age’:18,‘gender’:‘ma
2020-11-15 17:37:25
72
原创 2020-11-11
while循环 while 条件:当条件成立是循环 循环体 while True: print(“这是一个死循环”) break:退出并结束循环 continue:跳出本次循环,从下一次循环继续执行 元组:如果元组中只有一个元素,一定要在元素后面加一个逗号,否则不认为是元组 menu = (‘红烧鱼’,) #对的 注:元组和列表非常相似,也是有序的线性表,本质上最大的区别就是内容不可变。 字符串:是由数字、字母、下划线组成的一串字符。它是编程语言中表示文本的数据类型,可以用单引号、双引号或三引号来创建字符
2020-11-11 18:20:09
168
原创 python笔记
Python自带的数据类型包括: 1、基本类型:数字,字符串,None( 空类型),布尔 2、复合类型:列表,元组,字典,集合 python中数字大小没有限制 int:整数,float:浮点数,bool:布尔类型true/fasle也可以是1/0,type()函数可以用来查询变量所指的对象类型 算数运算 加法,- 减法,* 乘法,/ 除法 % 取模 21%10输出结果是1 ** 幂 10**21是10的21次方 // 取整除 9//2输出结果是4,9.0//2.0输出结果是4.0 比较运算符 == 等
2020-11-03 22:53:32
129
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人