![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
学习总结
文章平均质量分 68
wqy19941008
这个作者很懒,什么都没留下…
展开
-
FlinkSQL
flink-sql-doit deep as sea原创 2022-12-14 22:52:54 · 842 阅读 · 1 评论 -
DoitHive
Hive doit原创 2022-09-22 14:07:36 · 487 阅读 · 0 评论 -
算法的深入学习和总结2022-09-05
算法相关原创 2022-09-06 10:45:36 · 462 阅读 · 0 评论 -
实时Flink1.14.4 doit
DOIT Flink 笔记 涛哥NB原创 2022-09-01 09:02:27 · 682 阅读 · 0 评论 -
Redis 黑马
SQL–>>结构化 / 关联的 /SQL查询 /事务ACID/磁盘存储/垂直方式/数据结构固定 相关业务对数据安全性一致性要求较高。NOSQL—>非结构化/无关联/非SQL/ BASE /内存/水平方式/数据结构不固定 对一致性 安全性要求不高 对性能要求。incrbyfloat setnx set 不存在的否则不执行。常见命令---- SET GET。NoSQL: 文档型 KV型。setex 添加一个 string 指定有效期。命令行AUTH 指定密码。主从集群 分片集群。String 类型。.原创 2022-08-28 09:31:36 · 252 阅读 · 0 评论 -
Apache Doris
MPP 分析型数据库产品。基于Doris 0.15 -1.0MPP Massively Parallel Processing 大规模并行处理。原创 2022-08-26 08:00:26 · 860 阅读 · 0 评论 -
Hbase相关学习及提升
基础底层原理企业开发TSDB 时间戳模式,rowkey设计基础表格模式依赖框架整合框架设计理念:数十亿行 数百万列稀疏的 分布式的持久的 多维排序MapMap 由:映射中的每个值 都是未解释的字节数组。总结 :最终理解为 稀疏 ---- 分布式---- 多维---- 排序的映射。......原创 2022-08-21 23:22:31 · 276 阅读 · 0 评论 -
Apache Doris && Kafka
kafka &&Doris原创 2022-08-14 23:35:55 · 544 阅读 · 0 评论 -
Gitlab&&Jenkins&&CICD相关。
安装流程。原创 2022-08-10 09:37:56 · 152 阅读 · 0 评论 -
Other Kafka
Other Kafka原创 2022-08-09 09:35:28 · 361 阅读 · 0 评论 -
技术升级学习新的大数据开源框架
Apache DolphinScheduler &&DataX&&Sqoop&&Doris &&StarRocks原创 2022-08-07 21:33:35 · 693 阅读 · 0 评论 -
尚硅谷前端HTML-CSS / CSS
尚硅谷前端HTML-CSS /CSS-01原创 2022-02-21 19:47:31 · 176 阅读 · 0 评论 -
尚硅谷前端Vue2.0+Vue3.0
尚硅谷前端Vue2.0+Vue3.0简介Vue Vue基础Vue-cli Vue-router Vuex element-ui vue3一套用于构建用户界面的渐进式JS框架。 自底向上逐层 的应用 从简单到复杂 引入各式各样的组件。尤雨溪。Vue2.0 2016-10-1 Vue3.0 2020Vue 特点:1 组件化模式 提高代码复用率 代码更好维护2 声明式编码 让 编码人员无需直接操作DOM 提高研发效率3 虚拟的DOM和优秀的Diff算法 尽量复用DOM节点。虚拟D原创 2022-02-18 08:56:46 · 208 阅读 · 0 评论 -
尚硅谷前端HTML-CSS /HTML
尚硅谷前端HTML-01软件分类系统软件 应用软件 游戏软件软件:客户端 服务器。客户端–文字客户端–图形化界面 C/S– 网页。 B/S优点不需要安装。无需更新 跨平台。蒂姆 伯纳斯 李 : 万维网发明人。第一个服务器 第一个网站— 浏览器 的问题:网页编写没有标准1994–W3C 网页开发标准 W3C 规范 。主要阻碍【微软IE】W3C:一个网页 分为三部分:结构 HTML 页面的结构表现 CSS 页面元素的样式行为JavaScript 响应用原创 2022-02-17 20:20:49 · 362 阅读 · 0 评论 -
Go学习[尚硅谷]-06
Go学习[尚硅谷]-06经典项目 海量用户即时通讯系统make 和new的区别https://sanyuesha.com/2017/07/26/go-make-and-new/https://www.kancloud.cn/gofor/golang-learn/2120511小结new(T) 返回 T 的指针 *T 并指向 T 的零值。make(T) 返回的初始化的 T,只能用于 slice,map,channel。new 只能传递一个参数,该参数为一个任意类型,可以是Go语言内建的类型,也原创 2022-02-16 10:24:12 · 127 阅读 · 0 评论 -
Go 语言学习-5
Go 语言学习-4Go 反射反射的应用场景json tag匿名函数 函数赋给变量 适配器函数 使用反射完成自己创建框架package. reflect反射可以在运行时动态获取变量的各种信息 比如变量的类型类别如果结构体变量 还可以获取到结构体本身的信息 包括结构体字段 方法 。通过反射 可以修改变量的值 可以调用关联的方法使用反射需要import (“reflect”)反射:变量 接口interface{} 和reflect.Value 是可以相互转换的 。interfa原创 2022-02-15 11:46:01 · 302 阅读 · 0 评论 -
Go语言学习入门-1
尚硅谷Golang学习原创 2022-01-27 09:24:11 · 236 阅读 · 0 评论 -
尚硅谷大数据之数据质量管理
数据质量管理数据质量管理(Data Quality Management)原创 2022-01-05 00:07:04 · 190 阅读 · 0 评论 -
尚硅谷大数据之 权限管理Ranger 元数据管理Atlas
尚硅谷权限管理RangerRangerApache Ranger是一个Hadoop平台上的全方位数据安全管理框架,它可以为整个Hadoop生态系统提供全面的安全管理。随着企业业务的拓展,企业可能在多用户环境中运行多个工作任务,这就需要一个可以对安全策略进行集中管理,配置和监控用户访问的框架。Ranger由此产生!Ranger的官网:https://ranger.apache.org/Ranger 目标允许用户使用UI或REST API对所有和安全相关的任务进行集中化的管理允许用户使用一个管理原创 2022-01-01 15:53:40 · 596 阅读 · 0 评论 -
尚硅谷大数据之电商数仓4.0Kerberos
数仓之用户认证数仓框架版本选型KerberosKerberosKerberos是一种计算机网络认证协议,用来在非安全网络中,对个人通信以安全的手段进行身份认证。这个词又指麻省理工学院为这个协议开发的一套计算机软件。软件设计上采用客户端/服务器结构,并且能够进行相互认证,即客户端和服务器端均可对对方进行身份认证。可以用于防止窃听、防止重放攻击、保护数据完整性等场合,是一种应用对称密钥体制进行密钥管理的系统。Kerberos术语1)KDC(Key Distribute Center):密钥分发中原创 2022-01-01 15:14:18 · 351 阅读 · 0 评论 -
尚硅谷大数据之数仓4.0之即席数仓Kylin+Presto
即席数仓 Presto + Kylin## Presto 架构 由多个Worker和Coordinator 组成 Catalog 表示数据源 一个Catalog包含 Schema 和ConnectorPresto优点: 1.基于内存运算减少了硬盘IO 计算更快2.可以连接多个数据源跨数据源连表查询 如Hive+Mysql缺点: Presto 并不是把PB数据都放在内存计算而是边读边计算,再清内存。这样计算耗得内存并不高 但是连表查询会产生大量临时数据,速度会变慢。Presto 优化原创 2022-01-01 13:49:46 · 214 阅读 · 0 评论 -
尚硅谷最新Spark3.0调优笔记
尚硅谷Spark 调优1. 查看Spark 执行计划2. 资源调优3. Spark SQL 语法优化4. 数据倾斜5. Job 优化6. Spark AQE7. Spark 3.0 DPP8. Spark 3.0 Hint增强9. 故障排除1. Explain 查看执行计划***分析–逻辑计划优化–物理计划–评估模型分析—代码生成基于代价的优化CBOsql.explain("") 空/simple/extended /codegen 显示可执行java 代码 /原创 2021-11-26 22:15:11 · 1041 阅读 · 0 评论