- 博客(6)
- 收藏
- 关注
RSS订阅原创 大数据生态与spark简介
1.1.大数据时代大数据时代的来临，带来了各行各业的深刻变革。大数据像能源、原材料一样，已经成为提升国家和企业竞争力的关键要素，被称为“未来的新石油”。正如电力技术的应用引发了生产模式的变革一样，基于互联网技术而发展起来的大数据技术，将会对人们的生产和生活产生颠覆性的影响。1.2.大数据的概念大数据的特点包含4个层面：数据量大（Volume），数据类型繁多（Variety），处理速度快（Velocity）和价值密度低（Value），统称大数据的“4V”。① 数据量大：根据IDC作出的估测，数据一直都
2021-03-03 17:44:24
290
1
原创 Python文件读写笔记-3
Python文件读写一.文件：被持久化的字符串，被持久化储存在磁盘上的字符串。二.读操作：将文件中的字符串加载进内存。三.写操作：将字符串写入到磁盘中的操作。四.open函数：用于读写文件。eg：print(help(open))参数：①file:文件名注意路径：绝对路径r"c:\test\hello.txt"相对路径 next \a.txt②encoding：指定open函数在读写文件时使用字符集。Windows默认字符集是gbk；notepad++默认字符集是UTF-8；open
2020-11-17 22:49:50
174
原创 Python高阶函数笔记-2
Python高阶函数一.高阶函数的定义：①.函数可以作为参数被传递②.函数可以做为返回值输出（满足二者之一皆为高阶函数）特点：函数可以作为参数传递，也可以作为返回值输出。eg：improt mathdef add(x, y, f): return f(x) + f(y)add(4,9,math.sqrt） # 5.0二.高阶函数常用的五个函数：（map,reduce,filter,sorted,reversed）①.map（）：map函数接受两个参数，一个是函数，一个是序
2020-11-10 18:26:14
143
原创 Python函数笔记-1
Python 函数1.函数的定义：一个被封装的具有特定功能的代码段。【关键字def】2.函数的特定点:①可以重复使用（复用性）；②保持代码的一致性；③方便修改。3.函数名：给封装好的代码段（函数）起个别名。4.参数分为两种：形参和实参。①形参：本质上是一个局部变量，由于接受函数外部的数据。它是定义函数时定义的；②实参：在函数调用执行时，传递的数据。5.返回值：将函数中的局部变量传递到函数外部。【return为关键字】注：return语句一旦执行函数就会终止。在没有return语句的前提下，默
2020-11-03 19:20:33
292
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人