自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(11)
  • 收藏
  • 关注

原创 每日一技:新项目虚拟环境和已有项目虚拟环境使用

pycharm 添加创建的虚拟环境。

2023-03-09 22:44:14 226

原创 clickhouse sql(一)

注意事项:分布式引擎不支持 alter drop partiion;’ '和null同意成空,clickhouse 并将空看成特殊的值。clickhouse 将空字符串和null,看成特殊的值‘’intersect distinct 取交集,并去重。类似laterl view 写法。intersect 直接取交集。–对null 和 ‘’不过滤。except 取差值。

2023-03-08 18:10:51 527

原创 centos修改静态ip地址

liunx 静态ip修改

2022-09-08 21:47:59 537

原创 hive安装

hive 单独节点安装,遇到问题记录

2022-09-04 17:44:30 887

原创 flink算子(四)

TableApidataset 和datastream 与tableAPI和sql之间的转换注意

2021-01-02 18:25:20 217

原创 oracle从这里开始

文章目录基本概念oracle 数据库启动方式oracle 内存结构oracle 三种文件oracle 进程oracle 启动命令基本概念oracle 19c 版本实例-instance是用于管理数据库文件的内存结构数据库磁盘上的物理文件,可以通过create database 进行创建。实例存在于内存中,而数据库存在磁盘上,所以实例可以独立于数据库存在,数据库也可以独立于实例存在。CBDContainer Database 数据的元数据存储库创建用户c## user_name 开头

2020-11-15 22:43:15 74

原创 mysql写数据流程和锁

mysql 写入数据流程分析基本文件概念更好的额理解写的流程,需要了解以下日志概念undologredologbinlogrelaylogslowlogquerylog逻辑分析

2020-11-01 22:34:08 450

原创 flink状态和容错(三)

目录state容错算子容错续跑task异常作业逻辑不变CP/SP策略bugfix升级续跑SP策略source容错续跑sink 容错续跑stateflink 支持有状态的流,存储历史的状态信息。状态分类keystate keyBy/groupBy/PartitonBy 后,每个key都有属于自己的一个stateoperatorstate-flink source connector 的实现会用operatorState 来记录source 数据读取的offset三种状态存储方式机使用场景f

2020-10-24 11:54:27 2286 4

原创 flink window 算子和dataset 算子相关(二)

目录基本概念datastreamdataset基本概念状态流每条流过的数据和前面的数据有关系无状态流类时Storm就是无状态的计算框架,每一条消息来了以后和前后都没有关系,一条是一条宽依赖父RDD的每个分区都回最多被子类的一个RDD所使用窄依赖父RDD的每个分区会被多个子类的RDD分区所使用dataset 和datastream 区别1.keyBy = groupBy() 根据key的hash值进行分组聚合datastreamspark streaming 中不管有没有数据,都是

2020-10-20 17:39:20 309

原创 flink 架构介绍和flink作业部署方式及优化方向参数(一)

目录flink 和spark 的比较flink 架构通信netty部署模式参数优化并行度设置优化方向flink 和spark 的比较flinkfink 支持轻量级分布式快照snapshot 实现容错支持带丰富事件、时间的窗口window 状态操作:time,session.count,data-driven程序自动优化,避免特定情况下shuffle,排序等代价操作,中间结果自动缓存优化flink taskslot 中对内存进行隔离,cpu是共享的。自动反压,不需要配置spark流计算是基

2020-10-17 17:17:22 565

原创 mysql索引理解实践

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、pandas是什么?二、使用步骤1.引入库2.读入数据总结前言提示:这里可以添加本文要记录的大概内容:例如:随着人工智能的不断发展,机器学习这门技术也越来越重要,很多人都开启了学习机器学习,本文就介绍了机器学习的基础内容。提示:以下是本篇文章正文内容,下面案例可供参考一、pandas是什么?示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。二、使用步骤1.引入库代码

2020-10-16 10:35:05 63

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除