- 博客(6)
- 收藏
- 关注
RSS订阅原创 大数据生态与Spark简介
大数据生态与Spark简介大数据概念大数据(big data,megadata)或称巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。在维克托·迈尔·舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数据进行分析处理。大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（价值密度）、Veracity（真实性）。大数据的不同层面及
2021-03-04 17:32:30
135
1
原创 2020-11-29
Python笔记-5文件读写、文件操作和简单电子词典文件读写文件：被持久化存储在磁盘上的字符串。读操作：将文件中的字符串加载进内存。写操作：将字符串写入到磁盘中的操作。open函数：用于读写文件。print(help(open))参数：file:文件名注意路径：绝对路径 r"C:\test\hello.txt"相对路径： next\a.nextencoding:指定open函数在读写文件使用时的字符集。windows 默认字符集是gdk。notepad++ 默认字符集
2020-11-29 18:25:58
97
原创 2020-11-27
Python笔记-4生成器函数和内置高阶函数生成器函数定义：包含yield关键字的函数。生成器函数使用yield返回返回值。函数并没有结束，还可以继续执行。当我们处理大量数据时，一个个获取数据，以节省内存空间。执行生成器函数时，返回生成器对象。只有使用next()函数执行生成器对象或循环生成器对象时，才会一个个返回数据。元祖生成器生成器的使用场景产生或处理大量数据，使用生成器一个一个的处理（生成），用于节省内存空间。range(100) 产生某个范围内的整数。使用生成器实现斐波那契
2020-11-27 15:02:47
83
原创 2020-11-27
Python笔记-3匿名函数和装饰器函数匿名函数lambda[形参]：返回值三目运算值1 if 条件 else 值2，条件为真结果为值1，结果为假，结果为值2高阶函数：将函数作为参数或返回值的函数。函数的返回值也是函数函数的柯里化装饰器函数定义：在不修改原函数代码的前提下，给原函数增加或修改功能，可以使用装饰器函数。它是一个高阶函数。将原函数作为参数，放到装饰器内部定义的函数中执行。在内部函数中增加新的功能。返回内部函数用于替换原函数。获取某个函数运行n次的平均时间
2020-11-27 13:15:00
74
1
原创 2020-11-11
Python笔记-2函数和参数的类型函数函数：一个被封装好的具有特定功能的代码段，可以被重复使用。函数名：给封装好的代码段（函数），起个别名。自定义函数：通过def关键字定义。如：形参：本质上一个局部变量，由于接收函数外部数据。它是定义函数时，定义的。实参：在函数调用执行时，传递的数据。返回值：将函数中的局部变量传递到函数外部。（return返回值）（return语句一旦执行，函数就会终止。）全局变量：在整个函数中都可以被调用的变量。一般定义在函数的外部，或者用global关键字在函数内
2020-11-11 18:50:04
168
原创 2020-11-03
Python笔记由于老师要求，通过写博客来完成作业，所以我来了✌✌有不对的地方请多多指教相互学习，蟹蟹????????一、python的定义：Python 是一个高级动态、解释性、编译性、互动性和面向对象的脚本语言。二 、python的特点：1、简单灵活2、 开源免费3、 跨平台4、 高级动态5、 支持命令式编程6、函数式编程7、 面向对象编程三、Python有五个标准的数据类型Numbers（数字）String（字符串）List（列表）Tuple（元组）Diction
2020-11-03 13:22:44
154
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人