笔记
大数据19-4马宇航
这个作者很懒,什么都没留下…
展开
-
2021-02-20
知识点:Spark是一门热门的大数据处理技术。支持采用Scala.java.python和R语言进行编程。在这里插入图片描述Spark和Hadoop安装所需准备:1.jdk-1.82. hdfs 2.7.7IT三次信息浪潮:1980年 个人计算机 解决问题:信息处理 代表:苹果,戴尔1995年前后 互联网 解决问题:信息传输 代表:阿里,腾讯2010年前后 物联网云计算和大数据 解决问题:信息爆炸 代表:新的市场标杆企业。大数据概念:(包含大量数据,速度快,结构和样式多,价值大)1.原创 2021-06-11 14:37:13 · 499 阅读 · 1 评论 -
2020-11-25
1.__name__属性一个模块被另一个程序第一次引入时,程序将被运行。用__name__属性来使该程序块仅在该模块自身运行时执行name Python解释器定义好的内置变量直接运行当前模块时,它的值是“main”,当模块被引用执行时,它的值是“模块文件的名字”或“包.模块名”当模块被引用执行时,不执行if name==“main”:print(“被引用时不执行!”)dirprint(dir(sys)) #显示模块中所有的函数名和变量名print(help(sys)) #查看模块的帮助文档原创 2020-11-25 09:08:16 · 94 阅读 · 0 评论 -
2020-11-25
高阶函数:满足一下条件之一的函数就是高阶函数1、函数可以作为参数被传递2、函数可以做为返回值输出高阶函数例子:improt mathdef add(x,y,f):return f(x) + f(y)add(4,9,math.sqrt) # 5.0常用的五个常用高阶函数map函数:map()函数接收两个函数,一个是函数,一个是序列,map将传入的函数依次作用到序列的每个元素,并把结果作为新的list返回。def f(x):return x * xmap(f,[1,2,3,4,5,6原创 2020-11-25 09:07:13 · 81 阅读 · 0 评论 -
2020-11-25
模块:.py文件。所有的python脚本都可以作为python模块被调用的。包:存放有相互关联的一组python模块的文件夹。init. py文件。pyc:经过python编译后的py模块文件,执行速度更快。sys是python内置模块,修改或者调用python解释器的方法。from … import语句from模块名import函数名(也可以是变量名或类名)from模块名import函数名as别名from模块名import*#把一个模块的所有内容全都导入到当前程序,一般不建议这样使用。s原创 2020-11-25 09:05:13 · 74 阅读 · 0 评论 -
2020-11-25
Python导入模块,Python import 模块导入模块引用as起别名 ,模块中所有内容用*代替from 模块名 import 成员名 as 别名__name 属性python内置的__name__属性可以用来识别程序是被导入的还是直接执行。if:判断 >>>当某些代码不想被引用时,添加__name__判断。包用于存放模块的文件夹,将有关联的同一类型的模块放在同一类型的同一个文件夹。包中必须包含__init.py文件。对包做初始化定义默认的设置。python包的导入1)im原创 2020-11-25 09:03:36 · 54 阅读 · 0 评论 -
2020-11-19
Python数据结构列表Python中列表是可变的,这是它区别于字符串和元组的最重要的特点,一句话概括即:列表可以修改,而字符串和元组不能。将列表当做堆栈使用:列表方法使得列表可以很方便的作为一个堆栈来使用,堆栈作为特定的数据结构,最先进入的元素最后一个被释放(后进先出)。用 append() 方法可以把一个元素添加到堆栈顶。用不指定索引的 pop() 方法可以把一个元素从堆栈顶释放出来。将列表当作队列使用:也可以把列表当做队列用,只是在队列里第一加入的元素,第一个取出来;但是拿列表用作这样的目的效率原创 2020-11-19 08:37:30 · 130 阅读 · 0 评论 -
2020-11-12
Python 函数函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段。函数能提高应用的模块性,和代码的重复利用率。你已经知道Python提供了许多内建函数,比如print()。但你也可以自己创建函数,这被叫做用户自定义函数。定义一个函数你可以定义一个由自己想要功能的函数,以下是简单的规则:函数代码块以 def 关键词开头,后接函数标识符名称和圆括号()。任何传入参数和自变量必须放在圆括号中间。圆括号之间可以用于定义参数。函数的第一行语句可以选择性地使用文档字符串—用于存放函数说明。函数内容以原创 2020-11-12 08:33:30 · 288 阅读 · 0 评论 -
2020-11-04
python的定义:Python 是一个高级动态、解释性、编译性、互动性和面向对象的脚本语言。python的特点:1、简单灵活2、 开源免费3、 跨平台4、 高级动态5、 支持命令式编程6、函数式编程7、 面向对象编程...原创 2020-11-04 22:42:03 · 91 阅读 · 0 评论