笔记
文章平均质量分 57
莽撞少年
热烈且自由
展开
-
数据类型之间可以进行加法运算吗?--Python
【代码】数据类型之间可以进行加法运算吗?--Python。原创 2022-12-19 12:24:07 · 466 阅读 · 1 评论 -
集合的增删改查?--Python
集合的增删改查原创 2022-11-30 20:01:58 · 299 阅读 · 0 评论 -
列表的嵌套--Python
列表的循环嵌套原创 2022-11-17 16:56:24 · 2716 阅读 · 0 评论 -
列表的循环遍历--Python
列表遍历原创 2022-11-17 16:34:57 · 209 阅读 · 0 评论 -
列表的修改--Python
列表的修改原创 2022-11-17 16:21:57 · 2855 阅读 · 0 评论 -
Python连本地MySQL接数据库
Python连接MySQL原创 2022-11-17 15:46:38 · 346 阅读 · 0 评论 -
列表的删除---Python
就是将列表设置为【】。但是与list1 = 【】有本质区别 前者是删除所有内容后者是给他一个空。clear 清空列表。原创 2022-11-17 10:07:40 · 1045 阅读 · 0 评论 -
列表的增加--Python
列表的增加原创 2022-11-15 16:39:47 · 121 阅读 · 0 评论 -
列表的查询--Python
列表的查询原创 2022-11-14 19:00:00 · 594 阅读 · 0 评论 -
什么是列表? 列表的定义格式-Python
列表的定义原创 2022-11-14 10:24:41 · 653 阅读 · 0 评论 -
字符串判断--Python
Python字符串判断原创 2022-11-14 09:51:34 · 424 阅读 · 0 评论 -
字符串对齐
格式:字符串.rjust(self(不用传值),width(字符宽度),fillchar(填充字符))格式:center(self(不用传值).width(字符宽度),)格式:和rjust使用方式一样,只不过字符串在左侧。原创 2022-11-11 19:45:00 · 280 阅读 · 0 评论 -
字符串两侧指定字符删除--Python
字符串两侧指定字符删除--Python原创 2022-11-10 17:05:05 · 1914 阅读 · 0 评论 -
字符串转换--Python
字符串转换--Python原创 2022-11-10 16:46:45 · 349 阅读 · 0 评论 -
字符串拆分以及合并--Python
Python字符串的拆分和合并原创 2022-11-10 16:21:16 · 1291 阅读 · 0 评论 -
字符串查询--Python
字符串替换原创 2022-11-08 16:50:32 · 2590 阅读 · 0 评论 -
字符串替换Python
python原创 2022-11-08 16:33:54 · 177 阅读 · 0 评论 -
字符串定义
字符串定义原创 2022-10-31 15:53:29 · 215 阅读 · 0 评论 -
range函数
range函数详解原创 2022-10-31 11:22:41 · 6848 阅读 · 0 评论 -
for循环与while循环的区别
for循环和while循环区别原创 2022-10-31 10:53:35 · 1294 阅读 · 0 评论 -
for循环结构
for循环原创 2022-10-31 10:50:40 · 79 阅读 · 0 评论 -
三目运算符
三目运算符原创 2022-10-25 14:48:41 · 73 阅读 · 0 评论 -
复合赋值运算符
复合赋值运算符原创 2022-10-20 14:10:53 · 209 阅读 · 0 评论 -
Python赋值运算符
赋值运算符原创 2022-10-19 16:20:18 · 613 阅读 · 0 评论 -
算数运算符
算数运算符原创 2022-10-18 17:39:17 · 126 阅读 · 0 评论 -
数据类型的转换--Python
数据类型的转换原创 2022-10-18 11:05:47 · 781 阅读 · 0 评论 -
ENGINE=InnoDB DEFAULT CHARSET=utf8;是什么意思?
默认数据库字符编码格式。原创 2022-09-26 09:21:05 · 791 阅读 · 0 评论 -
阿里云如何提供接口 生成api?
1 阿里云生成api 生成接口原创 2022-06-30 12:08:47 · 1322 阅读 · 0 评论 -
Linux 常用命令
linux:常用命令:ls 列出目录内容ls -a 显示指定目录下所有子目录与文件,包含隐藏文件ls -l 以列表方式显示文件的详细信息ls -h 配合 -l 以人性化的方式显示文件大小案例:ls #查看当前目录内容 (缺点: 隐藏文件看不到,以 .开头的文件) !ls -a #查看当前目录内容 ,包括隐藏文件ls –al #查看目录内容的详细信息(查看文件类型、权限、大小等)ls -lh #查看目录内容的详细信息,以K,M,G方式显示文件大小ls /root原创 2021-12-19 18:39:21 · 275 阅读 · 0 评论 -
Mysql面试题(笔试基础)
练习数据数据表 --1.学生表 Student(SId,Sname,Sage,Ssex)--SId 学生编号,Sname 学生姓名,Sage 出生年月,Ssex 学生性别--2.课程表 Course(CId,Cname,TId) --CId --课程编号,Cname 课程名称,TId 教师编号--3.教师表 Teacher(TId,Tname) --TId 教师编号,Tname 教师姓名--4.成绩表 SC(SId,CId,score) --SId 学生编号,CId 课程编号,score转载 2021-11-22 15:04:44 · 1123 阅读 · 0 评论 -
Hive
1-Hive--DDL操作hql语句形式 DDL 库、表、视图 创建修改删除 create、alter、drop DML 表的具体数据的事务操作 数据写入 数据的修改 数据的删除 DQL 数据查询 from、where、group by、having 、聚合、select、order by,limit DCL 权限原创 2021-11-22 14:52:40 · 161 阅读 · 0 评论 -
spark 部署安装
安装笔Spark Local 模式搭建文档在本地使用单机多线程模拟Spark集群中的各个角色安装包下载目前Spark最新稳定版本:课程中使用目前Spark最新稳定版本:3.1.x系列https://spark.apache.org/docs/3.1.2/index.html★注意1:Spark3.0+基于Scala2.12Downloads | Apache Spark★注意2:目前企业中使用较多的Spark版本还是Spark2.x,如Spark2.2.0、Spark原创 2021-11-19 20:25:56 · 2559 阅读 · 0 评论 -
分布式
什么是分布式?分布式系统是指:一个硬件或软件,其组件会分布在不同的计算机上,彼此之间仅仅通过网络消息传递进行通信和协调的系统。简单来说就是一群独立计算机集合起来共同对外提供服务,但是对于系统的用户来说,就像是一台计算机在提供服务一样。分布式意味着可以采用更多的普通计算机(相对于昂贵的大型机)组成分布式集群对外提供服务。计算机越多,CPU、内存、存储资源等也就越多,能够处理的并发访问量也就越大。下面以网站架构变迁来举例说明。初代的web服务网站架构往往比较简单,应用程序、...原创 2021-11-19 20:17:55 · 237 阅读 · 0 评论 -
数据仓库
数据仓库的基本介绍思考: 什么是数据仓库呢? 数据仓库就是一个面向于主题的, 主要用于存储过去历史发送的数据, 对这些数据进行统计分析, 从而对未来进行决策支持 数据仓库最大的特点呢? 既不生产数据, 也不消耗数据, 数据来源于各个数据源什么是数据分析呢? 其实本质上就是在进行数据查询聚合统计过程, 根据需求得到相关结果 在简单点: 数据查询思考: 数据仓库四大特征?1) 面向于主题: 主题指的分析的内容, 要分析什么, 什么就是我们的主题2) 非易时性原创 2021-11-19 20:05:46 · 4932 阅读 · 0 评论 -
什么是RDD
RDD的五大特性(明确知道)五大特性:1- (必须的)可分区的: 每一个分区对应就是一个Task线程2- (必须的)计算函数(对每个分区进行计算操作)3- (必须的)存在依赖关系4- (可选的)对于key-value数据存在分区计算函数5- (可选的)移动数据不如移动计算(将计算程序运行在离数据越近越好)RDD的五大特点(了解)1- 可分区的: 分区是抽象的分区, 仅仅是定义分区的信息规则2- 只读特性: 一个RDD对象中数据是不可变的3- 依赖: RDD与RDD之间是存在.原创 2021-11-17 19:43:13 · 267 阅读 · 0 评论 -
spark sql 底层原理:
1- sparkSQL底层解析是有RBO 和 CBO优化完成的2- RBO是基于规则优化, 对于SQL或DSL的语句通过执行引擎得到未执行逻辑计划, 在根据元数据得到逻辑计算, 之后加入列值裁剪或谓词下推等优化手段形成优化的逻辑计划3- CBO是基于优化的逻辑计划得到多个物理执行计划, 根据代价函数选择出最优的物理执行计划4- 通过codegenaration代码生成器完成RDD的代码构建5- 底层依赖于DAGScheduler 和TaskScheduler 完成任务计算执行...原创 2021-11-17 19:40:14 · 932 阅读 · 0 评论 -
spark SQL自定义函数:
spark SQL 自定义函数:自定义函数:第一种: U D F (用户自定义函数)函数 特点: 一对一的关系,输入一个值以后输出一个值 (一进一出) 大部分的内置函数都是U D F函数比如:substr()第二种:U D A F 用户自定义聚合函数特点:多进一出比如SUM() count() avg()....第三种:U D T F 用户自定义表生成函数特点:一进多出(给一个数据,返回多行多列的数据)比如:explode()爆炸函数不管是...原创 2021-11-15 13:36:19 · 1197 阅读 · 0 评论 -
ODS
OLTP数据结构(重要)关系图订单模块订单表:订单核心信息订单详情表:订单表的副表,id和订单表一致订单分组表:订单组-壳子订单退款表:订单退款详情订单配送表:订单配送详情订单评价表:订单评价信息订单商品评价表:订单商品评价信息订单结算表:各方的收益结算订单商品快照表:下单后定型的商品信息,和SKU脱离支付模块订单组支付表:订单组支付成功以后插入数据。交易记录表:交易的详细记录信息。店铺商圈模块店铺表商圈...原创 2021-10-24 21:32:40 · 2675 阅读 · 0 评论 -
数仓工具!! 项目要用
数仓工具(重点)练习:http://hadoop02:8889/账号:hue密码:hueHue操作HDFS(操作)新建文件夹、新建文件、上传文件、查看文件、编辑文件、删除文件。Hue操作Hive(重点)建库、建表、插入、查询内置函数: 精度四舍五入 ▁▁▁round(double, length)字符串截取函数 ▁▁▁substr(string, start, length)字符串拼接函数 ▁▁▁concat concat_ws年月日获取▁▁▁year/quart原创 2021-10-21 21:02:35 · 396 阅读 · 0 评论 -
什么是数据冗余?
数据冗余数据冗余:在一个数据集合中重复的数据称为数据冗余例如在设计数据库时,某一字段属于一个表,但它又同时出现在另一个或多个表,且完全等同于它在其本来所属表的意义表示,那么这个字段就是一个冗余字段。关系数据库中的数据冗余主要是指关系数据库中同一信息数据的重复存贮。 数据冗余浪费了宝贵的资源,应尽量减少。但关系数据库中为实现一些功能有些数据冗余是必需的。必需的数据冗余主要用于以下用途:数据间建立联系,如两表间通过共同属性建立联系; 数据恢复,如建立备份文件以备正式文件被破坏时恢复; 数据核查转载 2021-10-20 13:32:20 · 14486 阅读 · 1 评论