![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
笔记
大数据19-3班 姚杰
数据小白 爬虫备选人
展开
-
大数据生态与spark简介
在大数据计算引擎当中,Spark不能忽视的一个重要技术框架,Spark继承了Hadoop MapReduce的优势,同时实现了计算效率的提升,满足更加实时性的数据处理需求。今天我们就来讲讲Spark生态圈入门。Spark在设计之初,就是围绕速度、易用性和复杂分析来研发的,当时的背景下,就是MapReduce在实时数据处理上有明显的不足,已经很难满足很多业务场景下的需求。 Spark生态圈核心组件围绕Spark,技术生态圈也不断完善,生态圈的各个组件,在Spark Core的支持下,能够满原创 2021-03-02 09:50:27 · 95 阅读 · 0 评论 -
大数据生态与spark简介
在大数据计算引擎当中,Spark不能忽视的一个重要技术框架,Spark继承了Hadoop MapReduce的优势,同时实现了计算效率的提升,满足更加实时性的数据处理需求。今天我们就来讲讲Spark生态圈入门。 Spark在设计之初,就是**围绕速度、易用性和复杂分析**来研发的,当时的背景下,就是MapReduce在实时数据处理上有明显的不足,已经很难满足很多业务场景下的需求。 Spark生态圈核心组件围绕Spark,技术生态圈也不断完善,生态圈的各个组件,在Spark ...原创 2021-03-02 09:48:31 · 92 阅读 · 0 评论 -
Python 第五次笔记
面向对象各位小伙伴们大家好,不出意外的话,今天这次博客可能是我今年的最后一次博客了 下次见面可能就在三个月以后了【手动滑稽】那么闲话不多说,我们开始今天的教程Let’s go!今天我们主要是讲面向对象但是面向对象并没有大家所想的那么简单,他其中有好多东西 比如类,类变量,数据成员,方法重写,局部变量,实例变量继承实例化方法对象概念我放在下图使用class的创建类还有类的定义最后还有self代表类的实例类的属性1、私有属性:私有属性用于保护数据,在内部无法直接被调用。私有属性原创 2020-11-29 17:11:33 · 147 阅读 · 3 评论 -
2020-11-24
Python第四次课堂笔记????天气逐渐变冷,我们也即将放假接着就来到了我的第四次课堂笔记兄弟们,let’s go!今天我们的课堂笔记主要讲pickle模块,序列还有引入库1.pickle模块这个模块实现了用于Python对象进行序列化和反序列化的二进制协议,该模块的序列化和反序列化过程叫做Pickling还有unpickling1.picking 当Python对象转化为字节流的过程2.unpickling 将字节流对象字节流二进制文件转化为Python对象的过程。2.引入库1.原创 2020-11-24 23:14:28 · 119 阅读 · 0 评论 -
Python模块
模还就那个硬块亲爱的小伙伴们,大家伙 又是崭新的一周,又是苦逼的大鹅 一周未见 不知大家有没有想我 不闲聊马上开始今天的技术分享Let’s go今天我们来讲一下Python中的模块那么问题来了,什么是模块呢?模块就是一个包含事先定义好的函数和变量的py文件,所有的Python脚本都可以作为Python模块被调用,达到使用该模块中函数等功能其次还要简单介绍一下 “包” 和“.pyc文件” **包,简单来说,包就是文件夹.pyc文件:经过Python编译后的文件用于加快模板的执行速度那么原创 2020-11-17 19:21:15 · 132 阅读 · 0 评论 -
2020-11-10
小伙伴们,好久不见,今天又是干饭得一周呢干饭了干饭了 加油干饭人今天我们来讲一下列表和元组那么问题来了,什么是列表和元组呢?列表和元素都是一个可以放置任意数据类型的有序集合那么列表和元组又有什么异同点呢?举个栗子!Python中的列表和元组同时可以存着int或者string类型的元素,其他语言则必须类型一致。例子如下上面这个是Python中的共性,当然,他们也有不同点。具体的区别如下:列表是动态的,长度大小不固定,可以随意地增加、删减或者改变元素(mutable)。而元组是静态的,长度大原创 2020-11-10 17:05:46 · 135 阅读 · 0 评论 -
2020-10-30
Python入门小讲解hello大家好 干饭了干饭了!今天又是被Python折磨的一天呢,因为各个学校的机制不同,我们学校采用发博客完成作业的方式,初来乍到,请多关照,因是技术小白,只能为大家提供一些相对基础的知识,希望大佬们可以指出我所说的问题,咱们可以相互沟通!OK,Let’s go!首先我们来讲一下函数基础:函数呢就是一段具有特定功能,被封装,可重用的语句块,通常用来实现某一个特定的功能,给这段程序起一个名字就可以在程序里任何地方通过这个名字任意次数的运行这个语句块,同时这也是函数的两个重原创 2020-10-31 16:41:36 · 331 阅读 · 0 评论