- 博客(6)
- 收藏
- 关注
RSS订阅原创 2021-03-01
Spark一、Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、Spark Streaming、GraphX、MLlib等子项目，Spark是基于内存计算的大数据并行计算框架。Spark基于内存计算，提高了在大数据环境下数据处理的实时性，同时保证了高容错性和高可伸缩性，允许用
2021-03-01 12:07:30
66
原创 2020-11-23
一、模块1.模块Python中的模块是一个包含事先定义好的函数和变量的文件，其后缀名是.py。模块可以被别的程序引入，已使用该模块中的函数等功能。内部可包含定义好的函数、变量、类、数据、执行的功能。模块有内置模块、自定义模块、第三方模块。“.pyc” 经过编译后的Python文件，加快模块的执行速度。2.使用模块调用模块可以简化开发、减少代码量。想使用Python源文件，只需在另一个源文件里执行import语句，语法如下：#import 模块名import os一个模块只会被导入一次
2020-11-23 13:30:24
100
原创 2020-11-22
常用函数使用加号可以进行序列的连接操作，原序列内容没有改变，数字序列可以和数字序列通过加号连接，连接后的结果还是数字序列；字符串序列也可以通过加号连接，连接后的结果还是字符串序列；数字序列和字符串序列不能通过加号连接一个数x乘以一个序列会生成新的序列，原来的序列将被重复x次s[i] 访问指定下标元素s[i:j] 访问指定范围元素s[i:j:k] 取值从i到j步长为kin 检测字符或数字是否在对应的列表中，返回值为True或False，数字类型不能再字符串类型中通过in进行成员资格检测，而字符串类
2020-11-23 13:28:02
43
原创 2020-11-20
1 函数函数是组织好的，可重复使用的，用来实现单一，或相关联功能的代码段。在Python中，定义一个函数要使用 def 语句，依次写出函数名、括号、括号中的参数和冒号 : ，然后，在缩进块中编写函数体，函数的返回值用 return 语句返回。def threeNumAdd(x,y,z):numSum = x + y + zreturn numSuma = threeNumAdd(10,20,30)print(a)函数参数：不可变数据类型，如 整数、字符串、元组。def ChangeInt
2020-11-23 13:25:24
83
原创 函数
Python高阶函数一.高阶函数的定义：①.函数可以作为参数被传递②.函数可以做为返回值输出（满足二者之一皆为高阶函数）特点：函数可以作为参数传递，也可以作为返回值输出。二.高阶函数常用的五个函数：（map,reduce,filter,sorted,reversed）①.map（）：map函数接受两个参数，一个是函数，一个是序列。map的作用：将传入的函数依次作用到序列的每个元素，并把结果作为新的list返回。②.reduce（）：把一个函数作用在一个序列上。函数会对参数序列中元素进行累积。③内置函数fi
2020-11-11 18:56:45
59
原创 Python
#pytnon1、单行注释：符号是#；#右侧的代码或者内容是不会被执行的,注释应该离开代码2个空格。如：# get the exact number2 、多行注释：记注释要用引号，一般类文档、函数文档、字符串之类的用双引号“ ”，变量用单引号’ '。3 、中文问题：# usr/bin/env python加上# -- coding:utf-8 --之后就能成功使用中文注释。4、在必要的地方加上注释①不太理解的代码②别人可能不理解的代码③提醒自己或别人注意的重要的代码5、表达式和语句
2020-11-02 20:32:37
139
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人