New soul

一.简介Kubernetes 是一个可移植的、可扩展的开源平台，用于管理容器化的工作负载和服务，可促进声明式配置和自动化。 Kubernetes 拥有一个庞大且快速增长的生态系统。Kubernetes 的服务、支持和工具广泛可用。1.1 Kubernetes不是什么 Kubernetes 不是传统的、包罗万象的 PaaS（平台即服务）系统。 Kubernetes 在容器级别而不是在硬件级别运行 它提供了 PaaS 产品共有的一些普遍适用的功能， 例如部署、扩展、负载均衡、日

1.Zabbix入门1.1Zabbix概述Zabbix是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix使用灵活的通知机制，允许用户为几乎任何事件配置基于邮件的告警。这样可以快速反馈服务器的问题。基于已存储的数据，Zabbix提供了出色的报告和数据可视化功能。1.2Zabbix 基础架构2. Zabbix部署2.1 zabbix集群部署 进程 alihadoop101节点 alihadoop102节点 ..

1.Presto简介1.1 Presto概念Presto是一个开源的分布式的sql查询引擎，数据量支持GB到PB字节，主要用来处理秒级查询的场景。注意：虽然Presto可以解析SQL，但它不是一个标准的数据库。不是Mysql或者oracle的代替品，也不能处理在线事务（OLTP）1.2 Presto架构1.3 Presto优缺点1.4 Presto、Impala性能比较https://blog.csdn.net/u012551524/article/details/791

问题原因由于我用的阿里云，然后在三台服务器上搭建了大数据的集群。因为平时测试要用到一些端口，所以开放了许许多多的端口。这样一来，无孔不入的挖矿程序就天天进来了，是不是就把我的CPU就给顶爆了。害，没办法，我也不懂。所以每次我都是手动杀死相对应的挖矿进程。今天这种情况又发生了，但是这次不一样的是，jps显示所有当前进程为process information unavailable 的状态。然后我搜了一下，我就把/tmp目录下所有的文件给删了。再然后就出现了jps显示不出任何进程，但是ES、hdfs、..

1.Superset概述 Apache Superset是一个开源的、现代的、轻量级BI分析工具，能够对接多种数据源、拥有丰富的图标展示形式、支持自定义仪表盘，且拥有友好的用户界面，十分易用。2.Superset应用场景 由于Superset能够对接常用的大数据分析工具，如Hive、Kylin、Druid等，且支持自定义仪表盘，故可作为数仓的可视化工具。3.SuperSet的安装和使用3.1 安装python环境Superset是由Python语言编写...

一.日期函数1.unix_timestamp（获取时间戳：秒）获取当前时间戳hive> select unix_timestamp();OK1605712071获取指定日期时间戳hive> select unix_timestamp('2020-01-01 00:00:00');OK1577836800获取指定格式的时间戳hive> select unix_timestamp('20200101 00:00:00','yyyyMMdd HH:mm

是这样的，我在dataGrap（连接了hive）写了脚本，脚本是这样的insert overwrite table dwd_fact_order_detail partition (dt='$do_date')select t1.id, t1.order_id, t1.user_id, t1.sku_id, t1.sku_name, t1.order_price, t1.sku_num, t

在idea中运行SparkSQL，要连接阿里云部署的Hive。开一个9866端口。除了把hdfs-site.xml,core-site.xmk,hive-site.xml放进去之后，还有修改hdfs-site.xml中的文件 <property> <name>dfs.client.use.datanode.hostname</name> <value>true</value> </property

这里先说一下一些二叉树的性质(和前中后序遍历无关，只是记录一下)1.二叉树第i层上的结点数最多为2^i（层次：规定树中的根节点的层次为0，其他节点的层次是其双亲节点的层次数+1）2.深度为h（h>=1）的二叉树中最多有(2^h)-1个节点（深度：树的深度是指树中所有结点的层次数的最大值+1）3.对于任何一颗二叉树，若叶结点的个数为n0，度为2的结点个数为n2，则有n0 = n2+1;下面是一棵二叉树，要求前中后序遍历。1.前序遍历: 先输出父节点，再遍历左子树和右子树.

一.逆波兰式（后缀表达式）计算思路：* 1.遍历逆波兰式的集合* 2.当遍历的元素为数字时，入栈 stack* 3.当遍历的元素为运算符时，stack栈弹出两个数，num2 num1,并用该运算符计算着两个数的值* 4.把计算结果再次压栈* 5.最后栈中的元素就是后缀表达式的结果代码传入的 逆波兰表达式为：4 5 * 8 - 60 + 8 2 / +逆波兰表达式转化为逆波兰集合/** * 后缀表达式转为集合 * @param express.

这里主要是计算表达式的结果，比如 “2+3*3-2”，输入一个表达式，计算出最后的结果.用栈实现的思路如下：1.遍历这个表达式，通过一个变量index记录索引值2.如果发现遍历出来的字符为一个数字，则直接入栈3.如果发现遍历出来的字符为一个运算符，则分为以下情况 3.1 若运算符栈为空，则直接入栈； 3.2 如果运算符栈有运算符，则进行比较。如果当前运算符的优先级小于等于栈中的运算符的优先级， 就需要从数栈中pop出两个数字，从符号栈中pop出一个运算符...

Josephu 问题 Josephu 问题为：设编号为 1，2，… n 的 n 个人围坐一圈，约定编号为 k（1<=k<=n）的人从 1 开始报数，数到m 的那个人出列，它的下一位又从 1 开始报数，数到 m 的那个人又出列，依次类推，直到所有人出列为止，由此产生一个出队编号的序列。创建一个孩子对象/** * 定义一个小孩儿对象 */class Boy{ private int no; private Boy nex...

创建节点对象// 定义节点，每个heroNode对象都是一个节点class HeroNode2 { int no; String name; String nickName; HeroNode2 next; HeroNode2 pre; public HeroNode2(int no, String name, String nickName) { this.no = no; this.nickName = nick

定义一个节点对象// 定义节点，每个heroNode对象都是一个节点class HeroNode { int no; String name; String nickName; HeroNode next; public HeroNode(int no, String name, String nickName) { this.no = no; this.nickName = nickName; this.n

一.普通队列 首先先用数组模拟一下简单的队列。对于队列，有4个元素，一个头head，一个尾tail，一个队列的最大容量maxSize，还有一个数组int[] 模拟队列。队列的主要操作有1.向队列中添加数据；2.展示整个队列中的数据；3.取出队列的第一个数据；4.得到队列的第一个数据，不取出，只展示；5.判断队列是否为空（head == tail）；6.判断队列是否已满（tail == maxSize -1）。因为队列的输出、输入是分别从前后端来处理，因此需要两个变量 head及 tail...

本次搭建日志收集系统是个小demo。用到的工具有链接：https://pan.baidu.com/s/1m_If2crjUtMTqRKuKrG9gw提取码：n9oi ，工具和代码工程都在都在这里。日志收集的流程如下。这里只是实现了到kibana一.配置java项目配置文件这里用的日志为log4j2。maven依赖<dependency> <groupId>org.springframework.boot</groupId> <..

rabbitMQ安装需要的文件，链接：https://pan.baidu.com/s/1so8ta3CP1zI6JNO4zt2sNw 提取码：vi47一.安装rabbitMQ1.安装erlang环境rpm -ivh erlang-18.3-1.el7.centos.x86_64.rpm2.安装socat若不安装socat，直接安装rabbit-server，则会出现安装socatrpm -ivh socat-1.7.3.2-1.1.el7.x86_64.rpm --fo.

123

MapRecuce是hadoop中计算的阶段，MapRecuce又分为map阶段和reduce阶段，map进行切割，reduce进行计算。下面为Java实现MapReduce的wordcount的案例pom.xml文件<dependency> <groupId>org.apache.hadoop</groupId> <artifactI...

https://aka.ms/diag_97275