- 博客(96)
- 资源 (24)
- 收藏
- 关注
RSS订阅原创 《孤尽班T31-05-技术架构选型笔记》
《孤尽班T31-05-技术架构选型笔记》T31项目文章目录《孤尽班T31-05-技术架构选型笔记》1. 关于技术选型1.1 为什么要啊进行技术选型？1.2 微服务架构的产生1.3 SOA和微服务的思维区别1.4 微服务分层架构图1.5 Spring Cloud2 数据访问层选型2.1 JDBC2.2 Mybatis 与Mybatis-plus2.3 数据库连接池选型3 消息中间件选型3.1 MQ消息队列简介3.2 MQ选型4 远程通信框架选型4.1 RPC框架核心技术点4.2 Fegin框架调用流程分
2021-11-11 02:04:28
871
原创 《孤尽班T31-07-避坑指南》
《孤尽班T31-07-避坑指南》孤尽训练营---------孤尽大佬亲自解读《alibaba Java 开发手册》 阿里巴巴编码规约 命名规范 常量定义 代码格式 OOP规约 集合处理 并发处理 控制语句详细内容参考《java开发手册-编程规约》文章目录《孤尽班T31-07-避坑指南》编码避坑指南1 浮点数处理1.1 科学计数法1.2 存储的说明1.3 浮点避坑指南1.4 日期数据处理3 控制语句的避坑规范3.1 switch3.2 三目运算符3.3 控制语句好习惯3.4 高
2021-11-11 01:45:06
227
原创 《孤尽班T31-06-项目编码规约》
《孤尽班T31-05-项目编码规约》孤尽训练营---------孤尽大佬亲自解读《alibaba Java 开发手册》 阿里巴巴编码规约-编程规约 编程规约 命名规范 常量定义 代码格式 OOP规约 集合处理 并发处理 控制语句T31项目第12天文章目录《孤尽班T31-05-项目编码规约》1.编码规约1.1 熵增定律1.2编码规约的作用1.3编码的规约要求1.4 java常量规约2.注释规约2.1注释的作用2.2注释的内容分类3.前后端的设计规约3.1前后端设计要素4.前后
2021-11-11 01:17:49
632
1
原创 《孤尽班T31-04-工程结构规约》
《孤尽班T31-04-工程结构规约》Joel 异常就是程序的运行过程中所发生的不正常的时间。它会终端正在运行的程序。文章目录《孤尽班T31-04-工程结构规约》前言—孤尽聊作业作业：用例图作业：类图作业：时序图作业：状态图作业：活动图一、工程结构(1) 应用分层1. 分层的目的2. MVC框架模式3. 推荐的分层结构4. 分层的异常处理5. 分层数据模型(2) 二方库依赖(3) 服务器二、设计规约三、类设计的五个原则四、Maven管理1. Maven的作用2. Maven的构建3. Maven的依
2021-11-04 16:07:02
218
原创 《孤尽班T31-03-异常处理与日志》
《孤尽班T31-03-异常处理与日志》Joel • 在互联网软件设计实践领域混迹的一枚老兵 • 云计算大数据领域的爱好者与实践者 • 在线职业教育的实践者 • 嗜好：阅读异常就是程序的运行过程中所发生的不正常的时间。它会终端正在运行的程序。文章目录《孤尽班T31-03-异常处理与日志》前言一、Java异常机制Java异常体系，使用异常、日志为系统保驾护航C语言的“异常”烦恼JAVA异常处理流程JAVA异常处理机制枝繁叶茂的JAVA异常体系二、异常处理设计与实践异常抛出与捕获的原则Java
2021-11-01 01:21:35
182
原创 centos6与7的区别（了解）
整体说明1.系统项目CentOS6CentOS71. 安装过程6 一步一步7 随意2. 默认的文件系统ext4xfs3. 启动流程串行并行4. 运行级别runleveltarget5. 内核2.6.323.10.06. 开机自启动服务chkconfigsystemctl enable/disable rsyncd7. 开启或关闭服务/etc/init.d/network stop/startsystemctl star
2021-10-30 15:39:31
348
原创 《孤尽班T31-01-架构理论笔记》
孤尽，阿里巴巴技术大拿，开课吧CTO当初得知孤尽大大会组建一个“Java学习班”的 时候，就期待能够加入其中，学 一些“够牛B”的技术，从最开始的差不多600人，到现在的不到60人，留下的人大概为最初人数的1/10，我希望自己能够成为自己能够成为最终“毕业班”中的一员。我想再过一个月，等到第一期“T31孤尽班”毕业的时候，我想人数和现在的人数应该相差不大了，留下的人，或许技术不是最好的，但一定是有耐心有恒心人，坚持，再坚持，不仅对学习是这样，对生活、对梦想更是要这样坚持。有些内容是整合补充资料，..
2021-10-28 15:22:57
449
原创 sar命令使用详解
sar命令使用详解一：命令介绍：参考资料：http://linux.die.net/man/1/sarsar（System ActivityReporter系统活动情况报告）是目前Linux上最为全面的系统性能分析工具之一，可以从多方面对系统的活动进行报告，包括：文件的读写情况、系统调用的使用情况、磁盘I/O、CPU效率、内存使用状况、进程活动及IPC有关的活动等，sar命令有sysstat安装包安装，本文主要以CentOS 6系列x64系统为例，介绍sar命令。 1.1：sar命...
2021-09-26 11:00:40
972
转载 http://md.94rg.com/
1、优质资源推荐人工博客 https://www.94rg.com程序员导航网 https://www.chenzhuofan.top2、Md2All 简介Markdown排版利器，支持 "一键排版" 、自定义css、80多种代码高亮。能让Markdown内容，无需作任何调整就能一键复制到微信公众号、博客园、掘金、知乎、csdn、51cto、wordpress、hexo。。。等平台。支持把图片自动上传到云图床;支持Latex数学公式在公众号等平台完美显示;支持生成带样式的html文件;甚至支持直
2021-08-21 19:44:35
1288
原创 java 基础面试题
示例 1 : 面向对象的特征有哪些方面？ 示例 2 : String是最基本的数据类型吗？ 示例 3 : int 和 Integer 有什么区别？ 示例 4 : String 和StringBuffer的区别？ 示例 5 : 运行时异常与一般异常有何异同？ 示例 6 : 说出ArrayList,Vector, LinkedList的存储性能和特性。 示例 7 : Collection 和 Collections的区别。 示例 8 : &和&&的区别 示
2021-04-05 02:44:57
453
转载 大数据技术之基础篇-Java 并发编程 78 讲-01线程与线程安全
大数据技术之基础篇——300分钟搞定数据结构与算法文章目录前言开篇为什么并发编程这么重要呢如何学好并发编程学习了本门课，你会有以下收获第01讲：为何说只有 1 种实现线程的方法？实现 Runnable 接口继承 Thread 类线程池创建线程有返回值的 Callable 创建线程其他创建方式定时器 Timer其他方法实现线程只有一种方式实现 Runnable 接口比继承 Thread 类实现线程要好前言本文为课程笔记，本着“只有亲身实践过并整理成体系才属于自己真正掌握的知识” 的理念写出本篇文章
2021-04-01 14:46:41
757
原创 大数据技术之复习篇
大数据技术之复习篇文章目录前言前言本文为课程笔记，本着“只有亲身实践过并整理成体系才属于自己真正掌握的知识” 的理念写出本篇文章，后续每天更新，持续关注，欢迎留言讨论~。简述个人情况：实习三个月刚刚结束，目前0offer。三月中旬离职，三月下旬准备自己的毕业论文，现在还在修改，说不慌是假的，但也没办法，慌也没用。静下心来，好好反思自己哪一块还存在欠缺，不做无用功，你学的越多，面试失败的可能性越大，针对简历上的东西，面试官之前问到的知识点查漏补缺，尤其是算法这块，自己真的是此次掉进坑里，爬不
2021-03-29 19:58:29
248
原创 2021-03-11
[3] R. Sethi, M. Traverso, D. Sundstrom, D. Phillips, W. Xie, Y. Sun, N. Yigitbasi, H. Jin, E. Hwang, N. Shingte, and C. Berner. Presto: SQL on everything. In IEEE 35th Int. Conf. on Data Eng. (ICDE), pages 1802–1813, 2019.[4] IOANNIDIS,Y.AND KANG, Y. 199
2021-03-11 01:17:48
114
原创 k8s常用命令
k8s常用命令一，kubectl 命令行的语法如下： kubectl [command] [TYPE] [NAME] [flags]上面的命令是： kubectl命令行中，指定执行什么操作（command），指定什么类型资源对象（type），指定此类型的资源对象名称（name）,指定可选参数（flags）,后面的参数就是为了修饰那个唯一的对象属于典型的英文语法，比如你是老师，你说，小明（kubectl）买（command）方便面（type）老坛酸菜方便面（name）桶装的（flag）。命令的根
2021-03-10 10:27:21
9953
原创 presto-Hive connector storage caching
Hive连接器存储缓存对于Trino，使用Hive连接器查询对象存储是一个非常常见的用例。它通常涉及大量数据的传输。这些对象是由多个工作程序从HDFS或任何其他受支持的对象存储中检索的，并在这些工作程序上进行处理。具有不同参数的重复查询，或者甚至来自不同用户的不同查询，经常访问并因此传输相同的对象。好处启用缓存可以带来很多好处：减少对象存储的负载每个检索和缓存的对象都避免在后续查询中从存储重复检索。结果，对象存储系统不必一次又一次地提供对象。例如，如果您的查询从存储访问100MB的对
2021-03-05 23:03:47
614
1
原创 2021-03-05
lk:default> EXPLAIN SELECT comment FROM tpch.sf1.nation WHERE nationkey > 3;- Output[comment] => [[comment]] Estimates: {rows: 22 (1.69kB), cpu: 6148.25, memory: 0.00, network: 1734.25} - RemoteExchange[GATHER] => [[comment]]
2021-03-05 12:57:51
77
原创 Presto（Trino）动态过滤与优化器
动态过滤动态筛选优化通过避免读取将被联接条件过滤的数据，从而显着提高了具有选择性联接的查询的性能。考虑以下查询，该查询捕获事实表store_sales与过滤后的维度表date_dim结合的常见模式：从store_sales联接date_dim中选择count（*）ON store_sales.ss_sold_date_sk = date_dim.d_date_sk WHERE d_following_holiday ='Y’AND d_year = 2000;如果没有动态过滤，Trino会将维表的谓
2021-03-03 18:34:26
2883
2
原创 《Presto系列文章-CHAPTER 4 Presto Architecture》
Presto（暂译：普雷斯托）系列文章目录-CHAPTER 4 Presto Architecture文章目录Presto（暂译：普雷斯托）系列文章目录-CHAPTER 4 Presto Architecture前言CHAPTER 4 Chapter 4: Presto Architecture集群中的协调节点和工作节点协调节点发现服务workers体系结构SPICatalogs, Schemas, and Tables目录，架构和表查询执行模型Query PlanningParsing and An
2021-03-02 22:21:46
532
转载 《跟我学算法系列文章——一文学会数据结构套路》
《一文学会数据结构套路》 关键词：数据结构 LRU Tree 文章目录《一文学会数据结构套路》前言3.1 手写 LRU 算法一、LRU 算法描述二、LRU 算法设计三、代码实现3.2 手撸 LFU 算法一、算法描述二、思路分析三、代码框架四、LFU 核心逻辑3.3 二叉搜索树操作集锦**一、在 BST 中查找一个数是否存在****二、在 BST 中插入一个数****三、在 BST 中删除一个数****四、最后总结**3.4 如何计算完全二叉树的节点数一、思路分析二、复杂度分析3.
2021-03-02 18:12:55
638
原创 《Presto（Trino）——The Definitive Guide》CHAPTER 6 Connectors Advanced CHAPTER 7 Connector Examples
Presto（暂译：普雷斯托）系列文章目录-CHAPTER 6 ConnectorsThis book provides a great introduction to Presto and teaches you everythingyou need to know to start your successful usage of Presto.—Dain Sundstrom and David Phillips, Creators of the PrestoProjects and Found
2021-03-01 23:52:46
621
原创 Java中Arrays打印二维数组、Arrays数组的常用操作
Java中Arrays.toString ()打印二维数组及Array数组的常用操作关键词：java 数组 数组常用操作 空数组 空串 Arrays Arrays.toString () Arrays.deepToString() HashSet文章目录Java中Arrays.toString ()打印二维数组及Array数组的常用操作1.Java创建数组的几种方式2.Java中Arrays.toString ()3. Java中对Array数组的常用操作1.Java创建数组的几种方式
2021-02-28 12:25:00
1681
原创 大数据技术之高频面试题-专业技术基础
大数据技术之高频面试题版本：V6.0目录第1章 面试说明 91.1 面试的本质 91.2 面试过程最关键的是什么？ 91.3 面试时该怎么说？ 91.4 面试技巧 91.4.1 六个常见问题 91.4.2 两个注意事项 101.4.3 自我介绍（控制在4分半以内，不超过5分钟） 10第2章 手写代码 112.1 快排 112.2 归并 122.3 手写Spark-WordCount 142.4 冒泡排序 142.5 二分查找 152.6 二叉树之Scala实现 172.
2021-02-27 02:41:41
1642
转载 一节课轻松通关 Spark
大数据跟我学系列文章007-三节课轻松通关 Spark （一）文章目录大数据跟我学系列文章007-三节课轻松通关 Spark （一）前言第01讲： MapReduce：计算框架和编程模型第02讲：Hadoop：集群的操作系统第03讲：如何设计与实现统一资源管理与调度系统第04讲：解析 Spark 数据处理与分析场景第05讲：如何选择 Spark 编程语言以及部署 Spark0 + 1 + 2 + 3 + 4关闭第06讲：Spark 抽象、架构与运行环境第07讲：Spark 核心数据结构：弹性分布式数据集
2021-02-27 02:31:43
1853
转载 《跟我学算法系列文章——一文吃透动态规划》
《一文吃透动态规划——Dynnamic Planning》 关键词：DP算法 面试 最值问题 子序列问题 子数组问题 回文问题 回溯算法 文章目录《一文吃透动态规划——Dynnamic Planning》前言1. 动态规划设计：最长递增子序列一、动态规划解法特殊方法：二分查找解法2. 二维递增子序列：信封嵌套问题一、题目概述二、解法总结3. 动态规划设计：最大子数组**思路分析**最后总结4. 动态规划答疑篇一、最优子结构详解二、dp 数组的遍历方向5.
2021-02-26 21:46:30
784
原创 《Presto（Trino）——The Definitive Guide》Presto指南20版
Presto系列文章目录This book provides a great introduction to Presto and teaches you everythingyou need to know to start your successful usage of Presto.—Dain Sundstrom and David Phillips, Creators of the PrestoProjects and Founders of the Presto Software Fou
2021-02-25 23:04:31
1829
3
原创 where not exists 避免重复插入SQL语句
项目场景：避免重复插入SQL语句：insert into TABLE2select *from TABLE1 where not exists (select 1 from TABLE2 where TABLE2.id=TABLE1.id and TABLE2.NAME = TABLE1.NAME)问题描述：SQL数据写入经常遇到重复插入数据导致数据样本变大，对测试和磁盘造成压力，浪费资源，故需要修改写入语句原语句：1. 清空表trino:hivetest> delet
2021-02-25 15:41:16
5645
原创 UML 类图生成工具simpleUML
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录一、simpleUML是什么？二、使用步骤二、使用三、说明如下图一、simpleUML是什么？一个根据代码自动生成UML的插件SimpleUML二、使用步骤IDEA中安装simpleUML1、下载simpleUML jar包2、 添加simpleUMLCEjar包File—>Settings—>Plugins—>Install Plugin from disk3、安装完成后重启IDEA二、使用
2021-02-25 10:32:53
2768
原创 单例模式浅析
java系列文章LOL里有一个怪叫大龙GiantDragon，只有一只，所以该类，只能被实例化一次步骤 1 : 单例模式步骤 2 : 饿汉式单例模式步骤 3 : 懒汉式单例模式步骤 4 : 什么时候使用饿汉式，什么时候使用懒汉式步骤 5 : 单例模式三元素提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录java系列文章前言一、单例模式是什么？单例模式单例模式面试题牛逼哄哄的面试官驴装大老：侬给偶说说什么是单例模式？写一个出来？？弱小的我：二、分类1.饿汉式单例模式2
2021-02-23 01:48:17
120
2
原创 linux 快捷脚本
[root@node02 bin]# cat hadoop#!/bin/bashcase $1 in“start” ){source /etc/profile;/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/start-dfs.sh/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/start-yarn.sh/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/mr-jobhistory-daemon.
2021-02-22 01:07:17
232
原创 free 简单命令查看集群内存使用状态
free 简单命令查看集群内存使用状态[root@slave03 ~]# ls a -l;free;df*-rw-------. 1 root root 1627 Dec 14 16:28 anaconda-ks.cfg-rw-------. 1 root root 2365 Dec 15 14:32 authorized_keystotal used free shared buffers cachedMem: 20472156 149
2021-02-22 00:27:59
857
原创 Prestodb：RaptorX：构建速度提高10倍的Presto
Prestodb：RaptorX：构建速度提高10倍的Presto2021年2月4日脸谱网：阿米特·杜塔（Amit Dutta），巴尔迪普·希拉（Baldeep Hira），比斯瓦比什（Biswapesh Chattopadhyay），詹姆士·孙（Jaliang Sun），谭嘉亮，王珂，林柳，娜文·切鲁库里（Nikhil Collooru），彼得·纳，罗希特·贾因（Rohit Jain），萨克舍姆·萨赫杰夫（Sakky Sachdev），谢尔盖·佩尔辛（Sergey Pershin），石轩范，瓦伦·贾
2021-02-21 22:19:09
1521
1
原创 《一篇读懂——BloomFilter布隆过滤器》
《一篇吃透——BloomFilter》 关键词：BloomFilter Redis Guava BigData 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录《一篇吃透——BloomFilter》前言一、背景知识布隆过滤器介绍产生的契机二、Bloom Filter 原理1.设计思想2.优缺点（1）占用空间少，能够保密数据（2）时间效率也较高，插入和查询的时间复杂度均为O(k)（3）存在假阳性的概率，不适用于任何要求100%准确率的情境3
2021-02-21 12:42:48
364
转载 《大数据跟我学系列文章-轻松通关 Flink ——06.Flink 进阶篇》
大数据跟我学系列文章006-轻松通关 Flink——06.Flink 进阶篇模块二：进阶篇第07讲：Flink 常见核心概念分析第08讲：Flink 窗口、时间和水印第09讲：Flink 状态与容错第10讲：Flink Side OutPut 分流第11讲：Flink CEP 复杂事件处理第12讲：Flink 常用的 Source 和 Connector模块三：生产实践篇第13讲：如何实现生产环境中的 Flink 高可用配置第14讲：Flink Exactly-once 实现原理解
2021-02-20 19:02:53
392
转载 Java编辑工具——IDEA图标含义大全
Java编辑工具——IDEAIDEA图标含义大全介绍 Flink 的 DataSet 和 DataStream 的 API，并模拟了实时计算的场景，详细讲解了 DataStream 常用的 API 的使用文章目录Java编辑工具——IDEAIDEA图标含义大全前言前言开发工具之前对大量的图标先有所了解，会提高不少效率首先讲下基本的图标Java类Java抽象类Groovy类注解类枚举类异常类最终的类接口包含有main方法的可执行类单元测试类是一个不包含在编译目录的
2021-02-20 17:19:08
2813
1
原创 《大数据跟我学flink系列文章000-Flink问题集锦》
大数据跟我学flink系列文章000-Flink问题集锦——03.Flink 常用的 DataSet 和 DataStream API介绍 Flink 的 DataSet 和 DataStream 的 API，并模拟了实时计算的场景，详细讲解了 DataStream 常用的 API 的使用文章目录大数据跟我学flink系列文章000-Flink问题集锦——03.Flink 常用的 DataSet 和 DataStream API前言一、Flink实操问题？1.yarn1）flink yarn-se
2021-02-20 14:28:27
419
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人