- 博客(15)
- 收藏
- 关注
RSS订阅原创 Hive理论及实践
Hive优化、Hive搭建、Hive操作命令、Hive自定义函数、UDF、UDAF、UDTF动态分区创建创建表如下插入表时，需要在最后的字段后面添加上想要设置动态分区的字段，如下是使用指定格式的createTime字段做动态分区。（3）分区、分桶BucketHive会针对某一个列进行桶的组织，通常对列值做hash。例如：mysql存储的数据有限，一般记录存到上亿或十亿以上性能不太好。因为一张表太大了，达到mysql支持的上限了。要想存完整数据，就要进行分库（把一张表拆分成
2022-12-06 08:44:53
330
1原创 3.Storm搭建及深入
Storm搭建及深入nimbus和supervisor启动后自动消失。Storm启动和关闭storm架构hadoop vs stormstorm容错
2022-10-18 19:15:26
233
原创 YumRepo Error: All mirror URLs are not using ftp, http[s] or file：
YumRepo Error: All mirror URLs are not using ftp, http[s] or file：
2022-10-11 11:17:30
135
原创 MapReduce实践
MapReduce求最大值最小值平均值、排序，IDEA运行MapReduce的准备环境，MapReduce提交任务、python开发MapReducePermission denied: user=duang, access=WRITE, node="/mytest/mr/minmax_mr":root:supergroup:drwxr-xr-xnull\bin\winutils.exe in the Hadoop binaries.
2022-10-11 11:09:11
334
原创 二分图算法
二分图（1）概念二分图又称作二部图，是图论中的一种特殊模型。 设G=(V,E)是一个无向图，如果顶点V可分割为两个互不相交的子集(A,B)，并且图中的每条边（i，j）所关联的两个顶点i和j分别属于这两个不同的顶点集(i in A,j in B)，则称图G为一个二分图。（2）二分图的充分必要条件至少有两个顶点且没有奇环！（3）二分图的判定染色法例题：***修修在黑板上画了一些无向连通图，他发现他可以将这些图的结点用两种颜色染色，满足相邻点不同色。澜澜不服气，在黑板上画了一个三个点的完全图
2022-09-17 19:55:07
208
原创 单调队列2020-11-24
单调队列一、原理：我们维护一个单调递减（增）的序列，每次新加的数字如果最小（大），放队尾，如果较大（小），就依次删队尾元素，找到它该在的位置。通过这个方式，我们使一个队列，始终有着目前的最大值（最小值）。http://poj.org/problem?id=2823题目大意：给n个数字，有一个大小为k的框，从左往右框数字，一共框n-k+1次，问每次框中数字的最大，最小值。解析：堆复杂度nlogn超时。通过这个序列来更新最大值，抹除左边出去的值，这个可以想到要用单调队列来解决。//G++超时，C++过
2020-11-24 21:33:36
51
原创 单调栈2020-11-24
单调栈一、分类：单调递增栈：单调递增栈就是从栈底到栈顶数据是从大到小单调递减栈：单调递减栈就是从栈底到栈顶数据是从小到大二、应用：三、举例：（1）http://acm.hdu.edu.cn/showproblem.php?pid=1506题目大意：给你一个直方图，告诉你各个条形矩形的高度，求基线对齐构成的矩形中最大的矩形的面积。解析：枚举对于每一个矩形，面积 = a[i]*(r-l-1),其中了，l，r是左右边界，找到左右边界是关键。#include <bits/stdc++.h&g
2020-11-24 21:10:11
71
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人