- 博客(6)
- 收藏
- 关注
RSS订阅原创 Spark简介
一、Spark简介 Spark是加州大学伯克利分校AMP实验室（Algorithms, Machines, and People Lab）开发的通用内存并行计算框架 Spark使用Scala语言进行实现，它是一种面向对象、函数式编程语言，能够像操作本地集合对象一样轻松地操作分布式数据集，具有以下特点。 1.运行速度快：Spark拥有DAG执行引擎，支持在内存中对数据进行迭代计算。官方提供的数据表明，如果数据由磁盘读取，速度是Hadoop MapReduce的10倍以上，如果数据从内存中读取，速度可以高达10
2021-03-01 21:26:21
306
原创 2020-11-25笔记 python面向对象
python中面向对象_类_对象的概念与定义 面向对象的概念，面向对象是一种编程思想。 是对现实世界中一类事物的抽象，在编程中可以理解为是一种建立现实世界事物的模型 面向对象和面向过程的区别： 面向过程关注的是完成工作的步骤。 面向对象关注的是谁能完成工作。 面向对象是在完成工作的时候关注哪些个体能够完成对应的工作，找到对应的个体即可完成对应任务。 python中类的概念，类是一系列事物的统称，同类事物必定具有相同的特征。 日常事物的特征根据特性分为状态和行为，对应到类中是变量和方法。 类的
2020-11-25 09:19:09
76
原创 2020-11-10笔记 Python模块
模块是一个包含所有你定义的函数和变量的文件，其后缀名是.py。模块可以被别的程序引入，以使用该模块中的函数等功能。这也是使用 python 标准库的方法。 下面是一个使用 python 标准库中模块的例子。 ...
2020-11-10 23:25:39
114
原创 2020-11-4笔记 Python文件和数据持久化
-## 文件读取.py 在使用python编程时，经常会遇到读写文件的操作。 很多童鞋困扰于读写文件的各种模式（如阅读、写入、追加等），以及搞不清open、read、readline、readlines、write等方法的使用。 一、open()打开文件获取文件对象 open() 函数参数说明 open(file, mode=‘r’, buffering=None, encoding=None, errors=None, newline=None, closefd=True) open()函数用于打开一个文
2020-11-04 09:02:53
160
原创 2020-11-1笔记 Python装饰器函数
装饰器函数:在不修改原函数代码的前提下，给原函数增加或修改功能，可以使用装饰器函数。 1.它是一个高阶函数。 2.将原函数作为参数，放到装饰器内部定义的函数中执行。 3.在内部函数中增加新的功能。 4.返回内部函数用于替换原函数。 def tools （func）： def inter（）: print（“开始执行…”）: func（） ...
2020-11-01 15:07:49
129
原创 2020-10-31笔记 Python生成器函数
函数:一个被封装好的具有特定功能的代码段，可以被重复使用。 函数名:给封装好的代码段(函数)，起个别名。 形参:本质上一个局部变量，由于接收函数外部的数据。它是定义函数时，定义的。 实参:在函数调用执行时，传递的数据。 返回值:将函数中的局部变量传递到函数外部。return返回值 定义一个函数: 普通函数 匿名函数(没有函数名的函数) 全局变量:在整个函数中都可以被调用的变量。 一般直接定义在函数的外部， 或者用giobal关键字在函数内部定义。 局部变量:函数内部定义的变量包括形参。只能在函数内部被调用。
2020-10-31 15:57:41
272
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人