weixin_45594417的博客

原创 Flume的TaildirSource配置路径匹配滚动时间（修改源码）

修改Flume中TaildirSource源码采集按时间滚动目录

原创 windows安装hadoop运行wordcount

windows安装运行wordcount1、下载官网hadoop包hadoop3.2.02、下载对应的winutils 和 hadoop.dll git链接下载对应版本的，解压备用3、配置 HADOOP_HOME 和添加PATH路径注意：其依赖java，JDK相关的配置就不赘述了，网上搜“我的电脑”右键->“属性”->“高级系统设置”->“环境变量”4、准备工作完成，还是编写wordcount运行依赖：<dependencies>

原创 UTC相关的时区转换

impala中的 from_utc_timestamp 函数：from_unixtime(1621493496)得到的是0时区的时间我们是东八区，日本东九具体如下图结论：想要转换时区最方便的是直接 使用 Etc/GMT-8（想要哪个时区改成自己想要的就行了）...

原创 linux 软件基础jar包

链接：https://pan.baidu.com/s/1gGEcwujM0ga5CK2ky0VToA提取码：ujjm

原创 从0开始一步一步搭大数据集群平台，小白也能玩，超详细！！！

从零开始の大数据生活（始める！！！）以下内容纯属个人学习工作总结，知识有限，有错的地方还请各位大佬指正。

原创 idea中scala显示返回变量的类型

原创 windows下的nc下载地址

地址：link

原创 常用的正则表达式

常用的正则表达式简介：正则表达式: RegularExpression是一个工具, 用来处理文本的最大强大的工具, 没有之一java中的正则:Pattern模式Matcher匹配器在java的字符串的方法中, 有4个方法是直接支持正则表达式matchreplaceAllreplaceFirstsplit正则的基本语法:[ab] a或者b[a-z] 所有的小写字母[...

原创 redis允许其它设备访问

redis允许其它设备访问修改配置文件redis.conf方法一：注释掉 # bind 127.0.0.1 （这个表示只允许本机访问）并修改 protect-mode no （yes表示当没有bind且没设置密码时不允许其它设备访问）方法二：修改为 bind 0.0.0.0 （表示允许其它设备访问）thanks...

原创 shell脚本中计算时间差模型

#!/bin/bashbefore=`date +%s`sleep 1after=`date +%s`echo 耗时：$[($after-$before)/60]分 $[($after-$before)]秒。

转载 windows 下git中vim中文错乱的问题

解决乱码：link

转载 MapReduce详解

链接 link

转载 java.io.FileNotFoundException: E:\readExcel\test (拒绝访问。)

链接：link

原创 git管理多个密匙，向多个github账号推库，最终简版windows

git多密匙 windows 向多账号push查了很多资料终于完成了配置步骤一ssh-keygen -t rsa 生成多组密钥对（本文生成两组）：将两组密钥对放入c盘windows用户下的.ssh目录下（可手动移也可用命令），下文用到该路径时输 ~/.ssh/ 即可，程序会自动解析 ~/ 路径步骤二将公钥（.pub结尾的为公钥）中的内容复制到你要push的服务器账号下，以g...

转载 git管理多个SSH公钥，多账户

多账户：link转自严振杰的博客：http://blog.yanzhenjie.com

转载 windows下git中vim中文乱码

解决：link

转载 git status 显示中文和解决中文乱码

git中午乱码解决：link

转载 Target runtime Apache Tomcat v7.0 is not defined解决办法

链接：linkjavaweb项目通过eclipse import导入到eclipse中，项目报红叉。编译环境，编译jdk级别均没有问题。右键检查properties中targeted runtime 中的tomcat是否为自己安装的，（默认是携带过来的）...

转载 解决 ERROR 1044 (42000): Access denied for user ''@'localhost' to database 'mysql'

链接：link

转载 联合索引在B+树上的结构介绍

链接: link

转载 ip地址、子掩码、网关、DNS之间的关系

楔子：以Windows系统中IP地址设置界面为参考(如图1)， IP地址, 子网掩码, 默认网关 和 DNS服务器, 这些都是什么意思呢？学习IP地址的相关知识时还会遇到网络地址,广播地址,子网等概念,这些又是什么意思呢 ？一 IP地址概述计算机要实现网络通信，就必须要有一个用于快速定位的网络地址。IP地址就是计算机在网络中的唯一身份ID，与现实世界中快递的配送需要有具体的住宅地址是一...

原创 ecplise常用快捷键

ecplise常用快捷键Eclipse中的快捷键：1.补全代码的声明：alt + /2.快速修复: ctrl + 1 --------------3.使用单行注释：ctrl + /4.使用多行注释： ctrl + shift + /5.取消多行注释：ctrl + shift + \6.复制指定行的代码：ctrl + alt + down 或 ctrl + alt + up7...

原创 java中的二分法查找与插值查找

二分法查找与插值查找两者的区别仅仅是中间值mid的不同，插值查找一般用于比较均匀的数据；import java.util.Arrays;public class SearchTest { public static void main(String[] args) { // TODO Auto-generated method stub int[] arr = SearchTes...

原创 java 中的基数排序（桶排序）

基数排序（桶排序）是一种稳定的（同样大小的相对位置保持不变），牺牲内存换速度的排序方法。package com.mycode.bucketsort;import java.text.SimpleDateFormat;import java.util.Date;//基数排序（桶排序）是一种牺牲内存换取速度的方法。public class BucketSortTest { publ...

原创 java中的六种排序：冒泡，选择，插入，希尔，快速，归并

冒泡，选择，插入，希尔，快速，归并import java.text.SimpleDateFormat;import java.util.Date;public class SortTest { public static void main(String[] args) { // TODO Auto-generated method stub int[] arr = SortT...

原创 java中的i++与++i问题 详细，看完你就明白了

i++ 与 ++ii++：先参与运算，再自加1；++i：先自加1，再参与运算；看似简单的两句话，其实实际情况有点复杂，让我们看看下面例子：int i = 1;i = i++;//运行结果：i = 1；对于上述例子相信网上搜一搜可以看到很多答案，但对于刚入门的小白来说可能有点看不懂，接下来我就用比较容易理解的话解释：关于 i = i++，首先 i 的值 1 会先压一个叫本地方法栈的地...

原创 java中的递归与八皇后问题

递归与八皇后问题八皇后问题，是一个古老而著名的问题，是回溯算法的典型案例。该问题是国际西洋棋棋手马克斯·贝瑟尔于1848年提出:在8×8格的国际象棋上摆放八个皇后，使其不能互相攻击，即任意两个皇后都不能处于同一行、同一列或同一斜线上，问有多少种摆法。package com.mycode.queen8;//递归与八皇后问题：八皇后问题，是一个古老而著名的问题，是回溯算法的典型案例。该问题是国...

原创 MyJavaCode-6

继承与重写//写一个用户程序测试Account类。在用户程序中，创建一个账号为1122、余额为20000、年利率4.5%的Account对象。使用withdraw方法提款30000元，并打印余额。//再使用withdraw方法提款2500元，使用deposit方法存款3000元，然后打印余额和月利率//写一个用户程序测试CheckAccount类。在用户程序中，创建一个账号为1122、余额...

原创 java中利用递归的简单迷宫模型

递归与迷宫模型//利用递归的迷宫找路模型public class MazeTest { public static void main(String[] args) { MazeTest mt = new MazeTest(); int[][] maze = mt.create();//创建一副迷宫地图 mt.show(maze);//显示迷宫地图 System.out.p...

原创 MyJavaCode-5

用户管理系统模拟增、删、改、查//public void enterMainMenu() //用途：显示主菜单，响应用户输入，根据用户操作分别调用其他相应的成员方法（如addNewCustomer），以完成客户信息处理。//private void addNewCustomer() // private void modifyCustomer()// private void dele...

原创 java中的单向环形链表及约瑟夫环模型

单向环形链表及约瑟夫环模型package com.mycode.circularlinkedlist;//单向环形链表与约瑟夫环（有n个小孩围成一圈，从第k个小孩起数(数第二个小孩算一下)，数m下，被数到人出列，剩下的人继续，求出列的顺序）public class CircularLinkedListTest { public static void main(String[] args...

原创 MyJavaCode-4

银行存取款模型//银行存取款模型public class Test { public static void main(String[] args) { // TODO Auto-generated method stub Bank bank = new Bank(); bank.addCustomer("John", "Yan"); bank.addCustomer("M...

原创 java中单向链表的增、删、改、查、反转

单向链表//单向链表模型(有头节点)的增、删、改、查、反转public class LinkedListTest { public static void main(String[] args) { LinkedList ll = new LinkedList(); HeroNode hero1 = new HeroNode(1, "亚瑟", "坦克"); HeroNode he...

原创 MyJavaCode-3

数组与类//定义类Student，包含三个属性：学号number(int)，年级state(int)，成绩score(int)。 创建20个学生对象，学号为1到20，年级和成绩都由随机数确定。//问题一：打印出3年级(state值为3）的学生信息。//问题二：使用冒泡排序按学生成绩排序，并遍历所有学生信息////提示：//1) 生成随机数：Math.random()，返回值类型doub...

原创 java中环形队列模型

环形队列//环形队列模型，队列最大容量为数组长度减 1 ，有一个约定空位；import java.util.Scanner;public class QueueTest { public static void main(String[] args) { // TODO Auto-generated method stub ArrayQueue queue = new Arr...

原创 java中利用稀疏数组降低内存

稀疏数组的创建与还原public class SparseArrayTest { //稀疏数组的应用 public static void main(String[] args) { // TODO Auto-generated method stub //创建一个二维数组 int m = 11, n = 12;//定义二维数组的行和列 int[][] arr = ne...

原创 MyJavaCode-2

杨辉三角//使用二维数组打印一个 10 行杨辉三角。// 1. 第一行有 1 个元素, 第 n 行有 n 个元素//2. 每一行的第一个元素和最后一个元素都是 1//3. 从第三行开始, 对于非第一个元素和最后一个元素的元素。即：//yanghui[i][j] = yanghui[i-1][j-1] + yanghui[i-1][j];public class Test { pu...

原创 java中数组在内存中的存放

一维数组存放数组变量名里装的是对象实例的首地址，二维数组的存放

原创 java一维数组中元素的默认初始化值

一维数组元素默认初始化值1.基本数据类型：byte,short,int,long -> 0;float,double -> 0.0char -> \u0000 (为其所对应的字符)boolean -> false2.引用数据类型：数组，类（如：String），接口 -> null;//一维数组中元素的默认初始化值public...

原创 MyJavaCode-1

功能：删除字符串中的字段public class Test4 { public static void main(String[] args) { // TODO Auto-generated method stub Scanner sc = new Scanner(System.in); System.out.println("请输入源字符串："); String str1 ...