自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 大数据生态与Spark简介

大数据简介大数据概念:1、数据量大2、处理速度快: 从数据的生成到消耗,时间窗口非常小,可用于生成决策的时间非常少3、结构复杂: 大数据是由结构化和非结构化数据组成的4、价值密度低: 价值密度低,商业价值高大数据影响:在思维方式方面,大数据完全颠覆了传统的思维方式:1、全样而非抽样2、效率而非精确3、相关而非因果大数据技术:1、数据采集: 利用ETL工具将分布的、异构数据源中的数据如关系数据、平面数据文件等,抽取到临时中间层后进行清洗、转换、集成,最后加载到数据仓库或数据集市中,成为

2021-02-26 17:13:50 223

原创 Python笔记-5

这份笔记关于字符串什么是字符串?字符串:字符串或串(String)是由数字、字母、下划线组成的一串字符,它是编程语言中表示文本的数据类型定义方式:1、a = “hello”2、a =‘hello’3、a = “”“hello”""4、a = str()字符串是不可变的字符串中的字符都是有序的,拥有自己索引(index,也叫下标)从0开始,索引也可以为负值,负数索引表示从右往左开始计数,最后一个元素索引为-1,倒数第二为-2,以此类推如:切片:Python 访问子字符串,可以使用方

2020-11-25 17:07:32 87

原创 Python笔记-4

这份笔记关于高阶函数什么是高阶函数?**高阶函数:**函数可以作为参数被传递或可以作为返回值输出下例为一个简单的高阶函数:abs()函数表示返回数字的绝对值round()函数用于数字的四舍五入Python里常用的有五个高阶函数:1、map()函数map()函数接收两个参数,一个是函数,一个是序列,map将传入的函数依次作用到序列的每个元素,并把结果作为新的list返回例:2、reduce()函数reduce把一个函数作用在一个序列[x1, x2, x3…]上,这个函数必须接收两个

2020-11-22 16:34:12 87

原创 Python笔记-3

这份笔记来说说什么是模块什么是模块?**模块:**就是一个包含事先定义好的函数和变量的.py文件,所有的python脚本都可以作为python模块被调用模块可以被别的程序引入,以使用该模块中的函数等功能**包:**简单来说,包就是文件夹,但该文件夹下必须存在 _ init _.py 文件**.pyc文件:**经过python编译后的文件,用于加快模块的执行速度如何使用模块?想使用 Python 源文件,只需在另一个源文件里执行 import 语句,语法如下:无论执行多少次import,一个

2020-11-14 21:03:24 135

原创 Python笔记-2

Python笔记-2这份笔记关于字典与集合字典(dict,全称: dictionary)字典(散列表)是一种通过“键”来引用“值”的数据结构字典中的值没有特殊的顺序, 但都是存储在一个特定的键(key)下.{“key”:None,“1”:“a”}键可以是数字, 字符串, 也可以是元组,但只能是不可变数据类型语法格式为:变量名 = {key:value} |变量名={键:值}字典的操作:字典遍历:1、keys()方法只取键2、values()只取值3、items取(键和值)

2020-11-05 19:48:45 146 1

原创 Python笔记-1

Python笔记这份笔记关于匿名函数,递归函数与生成器函数匿名函数:lambda表达式通常是在需要一个函数,但是又不想命名的时候用,即匿名函数lambda表达式的语法为:lambda 参数1,参数2,… ,参数n: 返回值如下图所示:给x,y,z分别赋值1,2,3,计算x+y+x和x+y+z递归函数程序调用自身的编程技巧称为递归( recursion)代码例如:递归函数优缺点:优点:定义简单,逻辑清楚。缺点:递归效率不高,因为每一次调用都有相应的数值存放在栈,而栈的空间是有限的

2020-10-30 13:36:33 280

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除