自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

个人总结

大数据

  • 博客(24)
  • 资源 (24)
  • 收藏
  • 关注

原创 Java中Arrays打印二维数组、Arrays数组的常用操作

Java中Arrays.toString ()打印二维数组及Array数组的常用操作关键词:java 数组 数组常用操作 空数组 空串 Arrays Arrays.toString () Arrays.deepToString() HashSet文章目录Java中Arrays.toString ()打印二维数组及Array数组的常用操作1.Java创建数组的几种方式2.Java中Arrays.toString ()3. Java中对Array数组的常用操作1.Java创建数组的几种方式

2021-02-28 12:25:00 1752

原创 大数据技术之高频面试题-专业技术基础

大数据技术之高频面试题版本:V6.0目录第1章 面试说明 91.1 面试的本质 91.2 面试过程最关键的是什么? 91.3 面试时该怎么说? 91.4 面试技巧 91.4.1 六个常见问题 91.4.2 两个注意事项 101.4.3 自我介绍(控制在4分半以内,不超过5分钟) 10第2章 手写代码 112.1 快排 112.2 归并 122.3 手写Spark-WordCount 142.4 冒泡排序 142.5 二分查找 152.6 二叉树之Scala实现 172.

2021-02-27 02:41:41 2575

转载 一节课轻松通关 Spark

大数据跟我学系列文章007-三节课轻松通关 Spark (一)文章目录大数据跟我学系列文章007-三节课轻松通关 Spark (一)前言第01讲: MapReduce:计算框架和编程模型第02讲:Hadoop:集群的操作系统第03讲:如何设计与实现统一资源管理与调度系统第04讲:解析 Spark 数据处理与分析场景第05讲:如何选择 Spark 编程语言以及部署 Spark0 + 1 + 2 + 3 + 4关闭第06讲:Spark 抽象、架构与运行环境第07讲:Spark 核心数据结构:弹性分布式数据集

2021-02-27 02:31:43 2612

转载 《跟我学算法系列文章——一文吃透动态规划》

《一文吃透动态规划——Dynnamic Planning》 关键词:DP算法 面试 最值问题 子序列问题 子数组问题 回文问题 回溯算法 文章目录《一文吃透动态规划——Dynnamic Planning》前言1. 动态规划设计:最长递增子序列一、动态规划解法特殊方法:二分查找解法2. 二维递增子序列:信封嵌套问题一、题目概述二、解法总结3. 动态规划设计:最大子数组**思路分析**最后总结4. 动态规划答疑篇一、最优子结构详解二、dp 数组的遍历方向5.

2021-02-26 21:46:30 884

原创 《Presto(Trino)——The Definitive Guide》Presto指南20版

Presto系列文章目录This book provides a great introduction to Presto and teaches you everythingyou need to know to start your successful usage of Presto.—Dain Sundstrom and David Phillips, Creators of the PrestoProjects and Founders of the Presto Software Fou

2021-02-25 23:04:31 2152 3

原创 where not exists 避免重复插入SQL语句

项目场景:避免重复插入SQL语句:insert into TABLE2select *from TABLE1 where not exists (select 1 from TABLE2 where TABLE2.id=TABLE1.id and TABLE2.NAME = TABLE1.NAME)问题描述:SQL数据写入经常遇到重复插入数据导致数据样本变大,对测试和磁盘造成压力,浪费资源,故需要修改写入语句原语句:1. 清空表trino:hivetest> delet

2021-02-25 15:41:16 5888

原创 UML 类图生成工具simpleUML

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录一、simpleUML是什么?二、使用步骤二、使用三、说明如下图一、simpleUML是什么?一个根据代码自动生成UML的插件SimpleUML二、使用步骤IDEA中安装simpleUML1、下载simpleUML jar包2、 添加simpleUMLCEjar包File—>Settings—>Plugins—>Install Plugin from disk3、安装完成后重启IDEA二、使用

2021-02-25 10:32:53 2861

原创 单例模式浅析

java系列文章LOL里有一个怪叫大龙GiantDragon,只有一只,所以该类,只能被实例化一次步骤 1 : 单例模式步骤 2 : 饿汉式单例模式步骤 3 : 懒汉式单例模式步骤 4 : 什么时候使用饿汉式,什么时候使用懒汉式步骤 5 : 单例模式三元素提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录java系列文章前言一、单例模式是什么?单例模式单例模式面试题牛逼哄哄的面试官驴装大老:侬给偶说说什么是单例模式?写一个出来??弱小的我:二、分类1.饿汉式单例模式2

2021-02-23 01:48:17 126 2

原创 linux 快捷脚本

[root@node02 bin]# cat hadoop#!/bin/bashcase $1 in“start” ){source /etc/profile;/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/start-dfs.sh/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/start-yarn.sh/kkb/install/hadoop-2.6.0-cdh5.14.2/sbin/mr-jobhistory-daemon.

2021-02-22 01:07:17 282

原创 free 简单命令查看集群内存使用状态

free 简单命令查看集群内存使用状态[root@slave03 ~]# ls a -l;free;df*-rw-------. 1 root root 1627 Dec 14 16:28 anaconda-ks.cfg-rw-------. 1 root root 2365 Dec 15 14:32 authorized_keystotal used free shared buffers cachedMem: 20472156 149

2021-02-22 00:27:59 886

原创 Prestodb:RaptorX:构建速度提高10倍的Presto

Prestodb:RaptorX:构建速度提高10倍的Presto2021年2月4日脸谱网:阿米特·杜塔(Amit Dutta),巴尔迪普·希拉(Baldeep Hira),比斯瓦比什(Biswapesh Chattopadhyay),詹姆士·孙(Jaliang Sun),谭嘉亮,王珂,林柳,娜文·切鲁库里(Nikhil Collooru),彼得·纳,罗希特·贾因(Rohit Jain),萨克舍姆·萨赫杰夫(Sakky Sachdev),谢尔盖·佩尔辛(Sergey Pershin),石轩范,瓦伦·贾

2021-02-21 22:19:09 1564 1

原创 《一篇读懂——BloomFilter布隆过滤器》

《一篇吃透——BloomFilter》 关键词:BloomFilter Redis Guava BigData 提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录《一篇吃透——BloomFilter》前言一、背景知识布隆过滤器介绍产生的契机二、Bloom Filter 原理1.设计思想2.优缺点(1)占用空间少,能够保密数据(2)时间效率也较高,插入和查询的时间复杂度均为O(k)(3)存在假阳性的概率,不适用于任何要求100%准确率的情境3

2021-02-21 12:42:48 1466

转载 《大数据跟我学系列文章-轻松通关 Flink ——06.Flink 进阶篇》

大数据跟我学系列文章006-轻松通关 Flink——06.Flink 进阶篇模块二:进阶篇第07讲:Flink 常见核心概念分析第08讲:Flink 窗口、时间和水印第09讲:Flink 状态与容错第10讲:Flink Side OutPut 分流第11讲:Flink CEP 复杂事件处理第12讲:Flink 常用的 Source 和 Connector模块三:生产实践篇第13讲:如何实现生产环境中的 Flink 高可用配置第14讲:Flink Exactly-once 实现原理解

2021-02-20 19:02:53 969

转载 Java编辑工具——IDEA图标含义大全

Java编辑工具——IDEAIDEA图标含义大全介绍 Flink 的 DataSet 和 DataStream 的 API,并模拟了实时计算的场景,详细讲解了 DataStream 常用的 API 的使用文章目录Java编辑工具——IDEAIDEA图标含义大全前言前言开发工具之前对大量的图标先有所了解,会提高不少效率首先讲下基本的图标Java类Java抽象类Groovy类注解类枚举类异常类最终的类接口包含有main方法的可执行类单元测试类是一个不包含在编译目录的

2021-02-20 17:19:08 3025 1

原创 《大数据跟我学flink系列文章000-Flink问题集锦》

大数据跟我学flink系列文章000-Flink问题集锦——03.Flink 常用的 DataSet 和 DataStream API介绍 Flink 的 DataSet 和 DataStream 的 API,并模拟了实时计算的场景,详细讲解了 DataStream 常用的 API 的使用文章目录大数据跟我学flink系列文章000-Flink问题集锦——03.Flink 常用的 DataSet 和 DataStream API前言一、Flink实操问题?1.yarn1)flink yarn-se

2021-02-20 14:28:27 748

原创 《大数据跟我学系列文章004-轻松通关 Flink ——04.Flink SQL & Table编程和案例》

大数据跟我学系列文章003-轻松通关 Flink——04.Flink SQL & Table编程和案例分别从 Flink Table & SQL 的背景和编程模型、常见的 API、算子和内置函数等对 Flink Table & SQL 做一个详细的讲解和概括,最后模拟了一个实际业务场景使用 Flink Table & SQL 开发文章目录大数据跟我学系列文章003-轻松通关 Flink——04.Flink SQL & Table编程和案例前言一、Flink

2021-02-19 17:11:34 526

原创 《跟我学算法系列文章》21天轻松通关——数据结构与算法-day01

《跟我学算法系列文章》21天轻松通关——数据结构与算法-day01——01.动态规划+滑动窗口介绍 动态规划+滑动窗口:元素和为目标值的子矩阵数量难度:困难/动态规划、滑动窗口——02.滑动窗口题目1. 滑动窗口的最大值(Leetcode 剑指 Offer 59 - I /简单)2. 长度最小的子数组(Leetcode 209/中等)3. 最小覆盖子串(Leetcode 76/困难)lagou、labuladong(1.7.1)4. 滑动窗口最大值 (Leetcode 239/困难)5.

2021-02-16 03:33:23 562

转载 《大数据跟我学系列文章-轻松通关 Flink ——03.Flink 常用的 DataSet 和 DataStream API》

大数据跟我学系列文章-轻松通关 Flink——03.Flink 常用的 DataSet 和 DataStream API介绍 Flink 的 DataSet 和 DataStream 的 API,并模拟了实时计算的场景,详细讲解了 DataStream 常用的 API 的使用文章目录大数据跟我学系列文章-轻松通关 Flink——03.Flink 常用的 DataSet 和 DataStream API前言一、流批一体?1.DateSet 和 DataStream 的区别和联系2.DataStrea

2021-02-14 20:24:32 764

转载 《大数据跟我学系列文章002-轻松通关 Flink-02-Flink 编程模型与spark、storm的比较》

大数据跟我学系列文章-轻松通关 Flink——02.Flink 的编程模型与其他框架(spark、storm)比较主要介绍 Flink 的编程模型与其他框架比较。包括 Flink 程序的基础处理语义和基本构成模块,并且和 Spark、Storm 进行比较,Flink 作为最新的分布式大数据处理引擎具有哪些独特的优势几种框架对比如下:文章目录大数据跟我学系列文章-轻松通关 Flink——02.Flink 的编程模型与其他框架(spark、storm)比较前言一、Flink 的核心语义和架构模型1

2021-02-14 18:04:00 424

转载 《大数据跟我学系列文章001-轻松通关 Flink-01-Flink 入门程序 WordCount 和 SQL 实现》

大数据跟我学系列文章-轻松通关 Flink——-01.Flink 入门程序 WordCount 和 SQL 实现分别从DataSet(批处理)和 DataStream(流处理)两种方式如何进行单词计数开发;最后介绍 Flink Table 和 SQL 的使用本文为拉勾课程《 42讲轻松通关 Flink》笔记,本着“只有亲身实践过并整理成体系才属于自己真正掌握的知识” 的理念写出本篇文章,后续每天更新,持续关注,欢迎留言讨论~文章目录大数据跟我学系列文章-轻松通关 Flink——-01.Flink

2021-02-14 13:59:31 399

原创 2021-02-04

打卡,图,并查集三道题

2021-02-04 23:29:50 106

原创 打卡2

打卡2,算法:二叉搜索树,字典树和哈希表

2021-02-03 23:34:26 64

原创 打卡1

打卡签到,算法刷题,三道题。

2021-02-02 23:30:30 82

原创 《实习至半,青葱少年,三十而已》

2月第一天,为期两个月的实习终于汇报完了,没有想象的那么难,也没有想象的那么简单,毕竟自己怎么准备的心里清楚的很,没有接触源码,阅读源码的习惯,只停留在初级阶段,加油吧,每天坚持刷完九道题目,刷不完就不睡了,另外多看书,多背,多读源码理解,少看花边新闻,无聊的段视频浪费时间啊!没多少时间了,春节过后都快三月份了!这两个月是成长最快的,加油!青葱少年,三十而已!...

2021-02-01 23:06:20 196

trino&OLKtpcds100G2.pptx

临时资料上传PPT

2021-03-13

bookmarks_2021_3_12.html

presto书签文件

2021-03-12

Phoenix安装部署.rar

Phoenix安装部署

2021-03-03

Phoenix构建二级索引.rar

Phoenix安装部署与Hbase整合

2021-03-03

TPC-DS说明文档.rar

TPC-DS-99SQL说明文档.rar

2021-02-25

Presto-The-Definitive-Guide.rar

Presto-The-Definitive-Guide.rar

2021-02-25

hive-testbench-hive14.zip大数据TPCDS-99SQL自动测试脚本

hive-testbench-hive14.zip 大数据TPCDS自动测试脚本

2021-02-25

Presto.zip

《Presto——The Definitive Guide》Presto指南20版

2021-02-25

coding417-examples-master.zip

Presto开发代码

2021-01-31

Myfilesustem.rar

Myfilesustem.rarhudi

2021-01-29

LOOATME.zip

LOOKATME技术PPT

2021-01-28

2个集群.rar,olk集群配置文件

olk集群配置文件

2021-01-21

RestAPI.rar

RestAPI.rar

2021-01-18

环境支持ABCDEF.rar

环境支持kerbe.rar

2021-01-15

软件配置文件配置文件soft.zip

软件配置文件配置文件

2021-01-10

动态目录验证.zip

软件配置文件配置文件

2021-01-10

日志文件配置动态目录——log.zip

日志文件配置动态目录——log.zip

2021-01-07

配置文件hetu-1.1.0-etc.zip

配置文件hetu-1.1.0

2021-01-06

openlookeng配置文件-一键启动脚本

openlookeng配置文件-一键启动脚本

2021-01-01

huawei开源软件河图配置文件代码

huawei开源软件河图配置文件代码

2020-12-28

开源软件hetu的配置资源

配置信息

2020-12-26

setting内部配置文件

setting内部配置文件

2020-12-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除