- 博客(22)
- 收藏
- 关注
RSS订阅转载 转载-HBase 相关面试题
小合并指的是将多个 HFile 合并成一个较大的 HFile，这个过程是由 HBase 自动触发的，当 HRegion 中的一个或多个 Store 的 HFile 数量达到一定的阈值时，HBase 就会触发小合并过程。最后，确实，如果 RowKey 太长，也会影响 HFile 的存储，因为 HFile 是以块的方式进行存储的，而每个块的大小是固定的。数据模型：HBase 是基于列族的 NoSQL 数据库，采用了一种稀疏矩阵的数据模型，可以处理半结构化和非结构化数据，适合存储大量的、快速变化的数据。
2023-12-15 11:28:52
63
原创 kettle实现行转列操作，另附列转行操作
一、行转列与列转行定义。行转列：就是将一个表中的数据按照指定的某一列，将其余的列名拆分。这篇文章就是讲这个的，具体意思看下图，体会一下。列转行：与行转列的功能相反，本文章未涉及，可参考：列转行行转列目的：将第一张图拆分成第二张图的样子。因为数据太多了，这里只截取了一部分。二、如何操作。本人实验环境是kettle 7,window 10,并以上面的数据为例。0转换设计：文本文件输入2读取的是图一对应的数据，字符串替换2是将"广西壮族自治区"改为”广西“，”西藏自治区“改为"西藏"等等。排
2020-12-31 17:16:06
1174
1
原创 两种不同的方法解决：ZooKeeper集群安装后无法启动报ZooKeeper JMX enabled by default 亲测有效
解决时间：2020年12月24日14点26分一、报错情况与内容（图中选白部分）：root@wxb02:/usr/hadoop/zookeeper-3.4.13/bin# ./zkServer.sh statusZooKeeper JMX enabled by defaultUsing config: /usr/hadoop/zookeeper-3.4.13/bin/../conf/zoo.cfgError contacting service. It is probably not runnin
2020-12-24 14:52:02
4325
3
原创 L2-014 列车调度 (25分)JAVA代码AC通过
原题链接火车站的列车调度铁轨的结构如下图所示。两端分别是一条入口（Entrance）轨道和一条出口（Exit）轨道，它们之间有N条平行的轨道。每趟列车从入口可以选择任意一条轨道进入，最后从出口离开。在图中有9趟列车，在入口处按照{8，4，2，5，3，9，1，6，7}的顺序排队等待进入。如果要求它们必须按序号递减的顺序从出口离开，则至少需要多少条平行铁轨用于调度？输入格式：输入第一行给出一个整数N (2 ≤ N ≤10^5)，下一行给出从1到N的整数序号的一个重排列。数字间以空格分隔。输出格式：
2020-12-20 20:16:28
325
原创 有关pip安装出现的问题(报：HTTPSConnectionPool……错误)，及解决方案，亲测有效！！！
一、什么错误？本人在安装pymysql时用Anaconda的pip方法时出现了下面的错误： Could not install packages due to an EnvironmentError: HTTPSConnectionPool。。。。。或者是重复出现几次WARNING: Retrying (Retry(total=4, connect=None, read=None, redirect=None, status=None)) after connection broken by ‘Read
2020-12-13 21:53:00
15312
12
原创 因为电脑是中文命名安装MySQL失败的最简单解决办法（家庭版||专业版都适合）
废话不多说，直接上干货！一、首先完全卸载MySQL。如果安装已经失败了则这一步必须做（没有安装过的话就没有必要了，直接跳第二步），要先完全卸载MySQL才行，可以参考这个博客：传送门二、给计算机新建一个用户。根据我的错误总结，我之所以建议这么做，是因为C盘用户目录下user文件名本来就是因为中文报错，大部分博客都是说直接修改这个文件名，然后再修改注册表。但是这种方法首先会遇到一个问题：之前这个用户所配置的环境变量有一部分都要修改，再一一修改的话会很麻烦；其次就是，我发现有许多人按照这种方法修改之后，
2020-11-18 22:53:47
2418
2
原创 L1-020 帅到没朋友JAVA 最慢86ms（有缺陷）
题目地址最后一个测试点数据量太大了，尝试用BufferedReader减少输入时间，以及数组来储存人物信息来减少查找时间，虽然前三个数据点很快，但是最后一个测试点还是过不了。import java.io.BufferedReader;import java.io.IOException;import java.io.InputStreamReader;public class L1_20帅到没朋友 { public static void main(String[] args) throws
2020-09-25 20:30:01
348
原创 L1-043 阅览室 (20分)java AC及测试点分析
测试点：多次借书，一次还书，以最后一次借书为准。一次借书，多次还书，以第一次还书为准。求平均时长时，要向上取整。import java.util.Scanner; public class Main { public static void main(String[] args) { Scanner in=new Scanner(System.in); int n = in.nextInt(); int[][] list = new
2020-09-25 19:54:39
716
原创 数据结构java语言描述-图--代码
创建邻接矩阵表示的无向图、有向图、有向网。网：带权的图。package 图Graph;import java.util.Scanner;public class Graph<T>{ protected final int MAXSIZE=10; protected final int MAX=999; protected T[] V; //顶点信息 protected int[][] arcs; //邻接矩阵 protected int
2020-05-10 17:11:59
910
原创 Linux系统应用 第八章 Shell编程入门
8.1Shell编程过程在Linux中，Shell不但能与用户进行逐个命令交互执行，也可以通过脚本语言进行编程。通过对Shell进行编程，可使大量任务自动化，对于系统管理、系统维护方面特别有用。复习与Shell相关的命令1.现在无论使用哪种Linux操作系统，默认的Shell总是/bin/bash。2.查看系统中SHELL变量的值：echo $SHELL3.查看系统内置了哪些Shel...
2020-05-08 13:28:43
1035
1
原创 P类、NP类、NPC类、NPH类的定义与基本关系
要想了解这写问题需要先了解下面这个定义判定问题： 判断是否有一种能够解决某一类问题的能行算法的研究课题。P类问题(P：polynominal，多项式)：所有可以在多项式时间内求解的判定问题构成P类问题，也就是可以用确定性算法在多项式步骤内解决的问题。多项式就是最高次幂为n^k。非确定性算法： 非确定性算法将问题分解成猜测和验证两个阶段。算法的猜测阶段是非确定性的，算法的验证阶段是确定性的，...
2020-04-26 13:43:05
3256
原创 Linux系统应用 第七章 Linux系统中的硬盘管理
7.1硬盘分区及格式化硬盘分区及格式化——具体步骤Linux操作系统在安装过程中，必须对硬盘进行分区操作，并将分区格式化为不同的文件系统之后，才可以挂载使用。但这是在安装过程中使用的是图形界面，下面通过命令方式，为新增加的硬盘进行分区和格式化操作。1．硬盘分区介绍考点：硬盘的分区分为主分区和扩展分区。一个硬盘最多可以划分为4个主磁盘分区，这时不能再创建扩展分区。一个硬盘中最多只能创建一个...
2020-03-06 10:39:18
1984
1
原创 Linux系统应用 第六章 Linux文件系统
6.1文件系统和文件类型Linux文件系统结构Linux的最重要特征之一就是支持多种文件系统，Linux采用与Windows完全不同的独立文件系统存储方式。其采用分层结构，顶层为根目录，用符号“/”表示，在根目录下是不同的子目录。/ Linux系统目录树的起点。 /root：系统管理员（也叫超级用户）的主目录。/boot：这里存放的是启动Linux时使用的一些核心文件。...
2020-03-04 21:14:31
3360
2
原创 Linux系统应用 第五章 系统管理及网络ip管理
5.1图形界面管理1、X-Window图形界面概述：1984年美国麻省理工学院与迪吉多（DEC）电脑公司合作制定了 Athena 计划，在UNIX 系统上发展一个分散式的视窗环境，这便是X-Window的第一个版本。1986年，麻省理工学院开始发行X-Window，随后X-Window很快就成为UNIX系统的标准视窗环境。1988年1月成立了一个非赢利性的X 联盟，负责制定 X-Window 的...
2020-03-03 12:12:12
1016
原创 Linux系统应用 第四章 用户账户和组账户管理
4.1用户账户管理——用户分类主要功能：在于提供不同用户使用本系统的权限分配。通过这种管理来保证用户数据与文件的安全。Linux中用户分成三类：超级用户、系统用户和普通用户。用户账户管理文件包括：1、用户账户文件：/etc/passwd2、用户影子文件：/etc/shadow注意：/etc/shadow文件只有root才有权限进行修改，普通用户不能读取该文件。用户种类用户描...
2020-03-02 15:22:03
998
原创 Linux系统应用 第三章Vim常见命令及快捷键
vim的工作模式vi是Visual Editor的缩写，它是一种命令行界面的文本编辑器。而vim则代表了Vi IMproved（增强版vi）。vim不但可以用不同颜色显示文字内容，还能够进行诸如shell脚本，c等程序编辑功能，你可以将vim视为一种程序编辑器。 1. vim的3种工作模式 ①一般模式（也叫指令模式）：光标移动、删除、复制粘贴、查找替换。 ②编辑模式：编辑文本，进行文本的...
2020-03-01 13:34:58
885
2
原创 算法分析与设计 第一章 搜索、排序
第一章第一节搜索/** * 线性搜索 * @param a数组名 * @param key带搜索的关键字 * @return 关键字在数组的索引：若不存在，则返回-1 */ int LinearSearch(int a[],int key) { for(int i=0;i<a.length;i++) { if(key==a[i]) { return ...
2020-02-29 11:14:49
172
原创 数据结构
随机存取（直接存取,Random Access）随机存取指的是当存储器中的数据被读取或写入时，所需要的时间与该数据所在的物理地址无关。顺序存取(Sequential Access)顺序存取(Sequential Access)是一种按记录的逻辑顺序进行读、写操作的存取方法，所需要的时间与该数据所在的物理地址有关。顺序存取表现为:在存取第N个数据时，必须先访问前（N-1）个数据。更全面的讲...
2020-02-24 21:07:06
399
原创 初识Hadoop简要概述
第一章大数据一般是指数量达到10T以上的数据，且具有4V特性。Google三大思想Google思想一：GFS管理节点管理存放数据的主机，存放数据的主机叫数据节点，上传的数据按数据的大小进行分块，数据块冗余度默认为3。文件元信息保存在管理节点。服务器由Master主节点（主人，管理节点）和多个ChunkSever（存储节点）组成，ChunkSever是实际数据存储的位置Goo...
2020-02-24 16:04:51
280
原创 Java零碎知识
保留两位小数：import java.util.Scanner;public class Extra_knowledge { public static void main(String[] args) { // TODO Auto-generated method stub //保留两位小数 Scanner sc = new Scanner(System.in); in...
2020-02-24 13:11:32
232
原创 Linux系统应用 第二章 Shell概念与基本命令操作
2.1shell概述操作系统的核心功能就是管理和控制计算机硬件、软件资源，以尽量合理、有效的方法组织多个用户共享各种资源，而Shell则是介于使用者和操作系统核心程序（Kernel）间的一个接口。在各种Linux发行版中，目前虽然已经提供了丰富的图形化接口，但是Shell仍然是一种非常方便、灵活的途径。Linux中的Shell又被称为命令行，在这个命令行窗口中，用户输入指令，操作系统执行指令并...
2020-02-24 13:08:47
1815
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人