- 博客(8)
- 收藏
- 关注
原创 2021-02-20
知识点: Spark是一门热门的大数据处理技术。 支持采用Scala.java.python和R语言进行编程。 在这里插入图片描述 Spark和Hadoop安装所需准备: 1.jdk-1.8 2. hdfs 2.7.7 IT三次信息浪潮: 1980年 个人计算机 解决问题:信息处理 代表:苹果,戴尔 1995年前后 互联网 解决问题:信息传输 代表:阿里,腾讯 2010年前后 物联网云计算和大数据 解决问题:信息爆炸 代表:新的市场标杆企业。 大数据概念:(包含大量数据,速度快,结构和样式多,价值大) 1.
2021-06-11 14:37:13
648
1
原创 2020-11-25
1.__name__属性 一个模块被另一个程序第一次引入时,程序将被运行。用__name__属性来使该程序块仅在该模块自身运行时执行 name Python解释器定义好的内置变量 直接运行当前模块时,它的值是“main”,当模块被引用执行时,它的值是“模块文件的名字”或“包.模块名” 当模块被引用执行时,不执行 if name==“main”: print(“被引用时不执行!”) dir print(dir(sys)) #显示模块中所有的函数名和变量名 print(help(sys)) #查看模块的帮助文档
2020-11-25 09:08:16
179
原创 2020-11-25
高阶函数: 满足一下条件之一的函数就是高阶函数 1、函数可以作为参数被传递 2、函数可以做为返回值输出 高阶函数例子: improt math def add(x,y,f): return f(x) + f(y) add(4,9,math.sqrt) # 5.0 常用的五个常用高阶函数 map函数: map()函数接收两个函数,一个是函数,一个是序列,map将传入的函数依次作用到序列的每个元素,并把结果作为新的list返回。 def f(x): return x * x map(f,[1,2,3,4,5,6
2020-11-25 09:07:13
141
原创 2020-11-25
模块:.py文件。所有的python脚本都可以作为python模块被调用的。 包:存放有相互关联的一组python模块的文件夹。init. py文件。 pyc:经过python编译后的py模块文件,执行速度更快。 sys是python内置模块,修改或者调用python解释器的方法。 from … import语句 from模块名import函数名(也可以是变量名或类名) from模块名import函数名as别名 from模块名import* #把一个模块的所有内容全都导入到当前程序,一般不建议这样使用。 s
2020-11-25 09:05:13
133
原创 2020-11-25
Python导入模块, Python import 模块 导入模块引用as起别名 ,模块中所有内容用*代替from 模块名 import 成员名 as 别名__name 属性python内置的__name__属性可以用来识别程序是被导入的还是直接执行。 if:判断 >>>当某些代码不想被引用时,添加__name__判断。 包用于存放模块的文件夹,将有关联的同一类型的模块放在同一类型的同一个文件夹。包中必须包含__init.py文件。对包做初始化定义默认的设置。python包的导入 1)im
2020-11-25 09:03:36
130
原创 2020-11-19
Python数据结构 列表Python中列表是可变的,这是它区别于字符串和元组的最重要的特点,一句话概括即:列表可以修改,而字符串和元组不能。 将列表当做堆栈使用: 列表方法使得列表可以很方便的作为一个堆栈来使用,堆栈作为特定的数据结构,最先进入的元素最后一个被释放(后进先出)。用 append() 方法可以把一个元素添加到堆栈顶。用不指定索引的 pop() 方法可以把一个元素从堆栈顶释放出来。将列表当作队列使用:也可以把列表当做队列用,只是在队列里第一加入的元素,第一个取出来;但是拿列表用作这样的目的效率
2020-11-19 08:37:30
207
原创 2020-11-12
Python 函数 函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段。函数能提高应用的模块性,和代码的重复利用率。你已经知道Python提供了许多内建函数,比如print()。但你也可以自己创建函数,这被叫做用户自定义函数。定义一个函数你可以定义一个由自己想要功能的函数,以下是简单的规则:函数代码块以 def 关键词开头,后接函数标识符名称和圆括号()。任何传入参数和自变量必须放在圆括号中间。圆括号之间可以用于定义参数。函数的第一行语句可以选择性地使用文档字符串—用于存放函数说明。函数内容以
2020-11-12 08:33:30
374
原创 2020-11-04
python的定义 :Python 是一个高级动态、解释性、编译性、互动性和面向对象的脚本语言。 python的特点: 1、简单灵活 2、 开源免费 3、 跨平台 4、 高级动态 5、 支持命令式编程 6、函数式编程 7、 面向对象编程 ...
2020-11-04 22:42:03
244
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅