花凡-CSDN博客

原创 spark技术简介

大数据生态圈存储主要包括hdfs、Kafka计算主要包括MapReduce、Spark、Flink查询主要为Nosql和Olap，Nosql主要包括Hbase、 Cassandra 等:其中olap包括kyline、impla其中Nosql主要解决随即查询Olap技术主要解决关联查询spark技术简介Spark最初是由美国加州大学伯克利分校的AMP实验室于2009年开发，是基于内存计算的大数据并行计算架构，可用于构建大型的、低延迟的数据分析应用程序。Spark在诞生之初属于研究型

2021-03-01 15:57:07 1367

原创 Java疫情地图项目

获取疫情信息//1.先准备一个网址（URL）URL url = new URL("网页地址");//2.打开服务器链接，得到连接对象connURLConnection conn = url.openConnection();//3.获取加载数据的字节输入流InputStream is = conn.getInputStream();//4.将is装饰为能一次读取一行的字节输入流 brBufferedReader br = new BufferedReader(new InputStreamR

2020-12-28 10:58:34 1251

原创 python异常处理

什么是异常程序运行过程中出现的错误和警告一般情况下，在Python无法正常处理程序时就会发生一个异常。异常是Python事件，表示一个错误。当Python脚本发生异常时我们需要捕获处理它，否则程序会终止运行。异常处理当程序遇到错误时，处理错误，并继续执行程序。try： #可能会出现异常的代码except： #捕获到异常时要执行的操作else： #没有捕获到异常执行的代码finally： #有没有捕获到异常都会执行的代码断言（Assertions）在需要的时候进行报错assert语句

2020-12-05 17:04:35 83

原创补充

补随机数随机整数方法，包含开始值和结束值print(random.randint(0,9))随机范围方法rangrange（开始值，结束值，步长值）##含头不含尾print(random.randrange(1,10,2))随机小数0~1print(random，random())随机数列中的值（字符串、列表、元组、字典、集合）print(random.choice(['red'，'black'，'green']))随机一个6位整数验证码print(" ".join([str

2020-11-24 19:58:03 106

原创 Python文件操作

文件打开关闭打开文件f = open(文件名)关闭文件f = close()文件打开方式open（filename，mode）open函数的第二个参数mode是用来指定文件打开方式的a：追加内容w：写内容，会覆盖原来的内容，文件不存在会创建文件r：只读a+：追加并读取w+：写入并读取r+：读取追加b：对二进制文件操作，要加b例如 f = open('workfile', 'w')第一个参数是一个含有文件名的字符串。第二个参数也是一个字符串，含有描述如何使用该文件的几个字符

2020-11-17 21:05:32 432

原创 python 模块

什么是模块模块是一个事先定义好的函数和变量的文件，模块的后缀名是.py模块是可以被别的程序引用，使用该函数的函数等功能例如support.pydef print_func( par ): print "Hello : ", par return如何使用模块import语句通过使用import语句来引用模块当解释器遇到 import 语句，如果模块在当前的搜索路径就会被导入。调用模块中的函数时，格式为模块名.函数名from……import语句搜索路径当你导入一

2020-11-15 20:57:55 103

原创高阶函数

高阶函数满足其中一个条件就是高阶函数函数可以作为参数被传递函数可以作为返回值输出当我们使用一个函数作为参数时，实际上是将指定的代码传递进了目标函数。例子：函数接受的一个参数是一个函数名输入def fun(a,b): return a+ba = fun(1,2)print(a)print(abs(-11))f = abs# 函数本身也可以赋值给变量，变量可以指向函数print(f(-10))输出31110函数的返回值是一个函数名输入de

2020-11-11 22:19:39 126

原创 Python字典和函数

认识字典字典（散列表）是一种通过”键”来引用”值”的数据结构.字典中的值没有特殊的顺序, 但都是存储在一个特定的键(key)下.{“key”:None,”1”:”a”}键可以是数字, 字符串, 也可以是元组键只能是不可变数据类型.变量名 = {key:value}创建字典items = [(‘name’, ‘Gumby’),(‘age’,42)]将列表转换成字典d = dict(items)print(d)字典中删除或清空元素adict = {‘name’: ‘Ben’, ‘age

2020-11-02 17:16:42 451

qq_47463985的博客