- 博客(6)
- 收藏
- 关注
RSS订阅原创 2021-03-02
大数据生态与Spark简介一、大数据生态1、大数据的概念：“大数据”是指以多元形式，许多来源搜集而来的庞大数据组，往往具有实时性。 大数据不仅仅是数据的“大量化”，而是包含“快速化”、“多样化”和“价值化”等多重属性。2、大数据的特点： 数据量大、数据类型繁多、处理速度快、价值密度低。（1）数据量大根据IDC做出估测，数据一直都以每年50%的速度增长，也就是说每两年就增长一倍（大数据摩尔定律）（2）数据类型繁多大数据是由结构化和非结构化数据组成的10%的结构化数据，存储在数据库中
2021-03-02 20:11:04
116
原创 python笔记五
文件文件：被持久化存储在磁盘上的字符串。文件分为文本文件和二进制文件，它们都是由字节组成的信息，通常保存在存储介质（如硬盘、U盘）文本文件都是可读的，比如可以通过文本编辑器直接打开或者在浏览器中显示。二进制文件除了文本文件之外的都是二进制文件，比如图片、Word文档，如果通过文本编辑器打开，会看到类似乱码一样的内容，不是可独字符。文件的操作基本流程：打开—>操作—>关闭打开用open()函数 open()函数用于读写文件open()的参数依次是要打开的文件名，...
2020-11-24 17:38:16
98
原创 python笔记四
模块模块：.py文件，所有的python脚本都可以作为python模块被调用。使用关键字 import 或 from xxx import xxx 引用模块from 包/模块/包.模块/ import 模块/函数/变量 as 别名import bao #使用包from bao.m1 import hello导入模块的多种方式：import xxx: #导入一个模块的所有成员import aaa,bbb #一次性导入多个模块的成员。不推荐这种写法，分开写。f..
2020-11-24 11:31:11
77
原创 2020-11-17
Python笔记Python random模块（获取随机数）常用方法和使用例子random作为Python自带的模块，无需下载即可直接使用。import random导入该模块。•randomrandom.random() 会生成一个[0,1)之间的随机小数。•uniformrandom.uniform(a,b) 指定范围内的随机浮点数import randomprint(random.uniform(10,20)) #18.324867•randin...
2020-11-17 16:04:11
102
原创 Python-笔记2
Python-笔记2能否写好注释或者正确的做注释是一个优秀程序员的必修课 。注释在程序运行过程中是可有可无的，它是附加在程序上的说明或者简单的标识，能够在短时间内理解程序的作用，对提高工作效率非常有帮助。注释：单行注释和多行注释单行注释（行注释 和 块注释）：单行注释符 ## 右侧的代码或者内容是不会被执行的为了提高可读性，注释应该至少离开代码2个空格多行注释（文档字符串 doctring）：我们对文档字符串的惯例是使用三重双引号" " "shebang ...
2020-11-10 16:00:18
154
2
原创 2020-11-03
python-笔记函数基础函数：一个被封装好的具有特定功能的代码段，可以被重复使用。函数名：给封装好的代码段（函数），起别名形参：本质上一个局部变量，用于接受函数外部的数据。它是在定义函数时定义的。实参：在函数调用执行时，传递的数据。返回值：将函数中的局部变量传输到函数外部。 return返回值 return语句一旦执行，函数就会终止写函数的目的是为了代码的重用定义一个函数:def 函数名（[形参1,形参2]): #定义函数 函数体函数（[实...
2020-11-03 18:29:07
61
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人