- 博客(6)
- 收藏
- 关注
原创 大数据生态与Spark
大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。对于一开始学习的hadoop,spark相较而言在近几年中流行起来,甚至有追赶上hadoop的趋势。Apache Spark是一个开源集群运算框架,最初是由加州大学柏克莱分校AMPLab所开发。相对于Hadoop的MapReduce会在运行完工作后将中介数据存放到磁盘中,Spark使用了存储器内运算技术,能在数据
2021-02-26 12:28:41 106
原创 2020-12-06
Python文件操作一、基本文件操作1.1创建和打开文件1.2关闭文件1.3打开文件时使用with语句1.4写入文件内容1.5读取文件二、目录操作2.1os与os.path模块2.2路径2.3判断目录是否存在2.4创建目录2.5删除目录2.6遍历目录三、高级文件操作3.1删除文件3.2重命名文件和目录3.3获取文件基本信息1.1 创建和打开文件open()函数基本语法:file=open(filename[,mode[,buffering]])参数解释:filen
2020-12-06 20:44:29 86
原创 2020-12-06
Python异常类总的来说,编写程序时遇到的错误可大致分为 2 类,分别为语法错误和运行时错误。Python语法错误语法错误,也就是解析代码时出现的错误。当代码不符合 Python 语法规则时,Python解释器在解析时就会报出 SyntaxError 语法错误,与此同时还会明确指出最早探测到错误的语句。例如:print “Hello,World!”我们知道,Python 3 已不再支持上面这种写法,所以在运行时,解释器会报如下错误:SyntaxError: Missing parenthese
2020-12-06 20:33:53 91
原创 2020-11-14
模块:py文件,所有的Python脚本都可以作为Python模块被调用的。包:存放有相互关联的一组Python模块的文件夹。init.py文件pyc:经过Python编译后的py模块文件,执行速度更快。(二进制)
2020-11-15 11:09:21 55
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人