- 博客(6)
- 收藏
- 关注
RSS订阅原创 大数据生态与spark简介
一.大数据生态 1.概念：大数据（BigData）简单来说就是一个巨量数据的集合，但又不仅仅是数据的大量化，还包含了快速化，多样化，价值化等 2.特征：大数据有五大特征 ①.VOLUME(大)：数据的采集，计算，存储量都非常的庞大 ②.VARIETY(多)：种类和来源多样化。种类有：结构化、半结构化和非结构化数据等，常见的来源有：网络日志、音频、视频、图片等等。 ③.VALUE(价值)：数据价值密度相对较低，犹如浪里淘金，百炼成钢般才能获取到大量信息中的部分有价值的信息 ④.VELOCITY(快)：数据增长
2021-03-03 13:41:38
73
原创 Python第五次笔记
一.异常处理（异常我们通常也叫做：BUG即臭虫，错误，debug调试） 异常在程序的执行过程中发生，它影响了程序的正常执行的事件，一般情况下，Python无法正常处理一个程序时会发生一个异常，当发发生异常时我们需要捕获处理它，否者程序会终止执行（捕获处理异常的过程我们叫异常处理） 1.python提供了两个非常重要的功能来处理python程序在运行中出现的异常和错误（异常处理和断言） ①.异常处理：让程序不报错.(不终止运行,可以提示错误,记录进错误日志) try:编写有可能会出错的代码 except:捕获
2020-11-30 18:41:00
71
原创 Python第四次笔记
**模块 什么是模块，模块就是所有的以.py后缀结尾的文件都是模块。我们可以在模块中定义好函数、变量、类、数据等内容。 模块可以被别的程序引入，以使用该模块中的函数功能。 1.使用模块： 当我们在一个.py文件中想调用模块实现功能时，需要用import或者form…import导入相关的模块(一个模块只会被导入一次，不管执行多少次import) 在模块被调用执行后会自动被Python解释器编译成二进制文件,用于对模块加速执行。 在 pycache 目录下创建 模块名.cpython-版本.pyc 语法格式：
2020-11-25 19:48:14
85
1
原创 Python第三次笔记
文件操作： 1.文件可以分为文本文件和二进制文件。 我们在使用Python编程时，经常会有一些读写文件的操作，在Python里，我们用open函数来打开文件获取其中的文件对象。 （1）.open()函数用于操作文件，使用方式为： open(file , mode) file:文件的路径，需带上文件名包含文件的后缀名（绝对路径或者相对路径） mode：打开文件的方式(一般为r，w，a，b，另外有r+，w+，a+) r（只读模式）：文件以自读方式打开，文件指针
2020-11-18 20:25:10
76
原创 Python笔记2
高阶函数:1.可以使用函数对象作为参数的函数。 2.可以将函数作为返回值的函数。 函数对象：①定义好的函数，使用函数名调用(不加括号) ②将函数作为参数的高阶函数,通过传入不同的函数，可以使执行的结果完全不同结果，如下所示 def add(f,x,y): return f(x) + f(y) print(add(lambda x:x**2,3,4)) print(add(lambda x:str(x),3,4)) print(add(lambda x:x/2 ,3,4)) ③内置高阶函数(map) ma
2020-11-11 19:58:51
63
原创 Python笔记
函数 （1）函数是一段具有特定功能、被封装、可重用的语句块，通常用来实现某一个特定的功能（函数有两个重要的概念：定义和调用）。 （2）函数可以通过def关键字def定义，具体的格式如下： def函数名（参数）： （3）函数的变量作用域 ①全局变量：函数以外定义的变量或者内部用global声明的变量，这种变量的作用与整个函数它的值可以在整个函数中都可以获取到。 ②局部变量：函数内部定义变量。只能在当前函数内部被调用的变量（一般优先使用局部变量） return函数的运用：函数一旦执行到return,函数自动结
2020-11-04 18:30:29
142
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人