自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(23)
  • 收藏
  • 关注

原创 MySQL

该函数适用于单对象无数组的简单情况DROP FUNCTION IF EXISTS `fn_json_getValueByKey`;CREATE FUNCTION `fn_json_getValueByKey`( jsonArray VARCHAR(10000), keyName VARCHAR(512)) RETURNS VARCHAR(2048) CHARSET utf8COMMENT '根据key提取json字符串value'BEGIN # 定义局部变量 DECLARE json

2021-10-09 16:01:50 217

原创 Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR

Sqoop导入mysql表中的数据到hive,出现如下错误:ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly.解决办法:# vim /etc/profileexport HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HIVE_HOME/lib/*# source /etc/profile

2021-07-23 15:31:50 381

原创 java.lang.NoSuchMethodError: org.apache.hadoop.hive.ql.session.SessionState

java.lang.NoSuchMethodError:org.apache.hadoop.hive.ql.session.SessionStateExecution Error, return code -101 from org.apache.hadoop.hive.ql.exec.mr.MapRedTaskjava.lang.NoSuchMethodError: org.apache.hadoop.hive.ql.session.SessionState.getPerfLogger()Lorg/

2021-07-15 21:20:31 1089 1

原创 2021-07-15

Yarn 任务问题描述yarn 任务执行提示成功,但任务退出,且报上述错误解决办法为yarn 分配更多内存: --driver-memory 512M

2021-07-15 16:39:19 85

原创 User class threw exception:org.apache.spark.sql.streaming

hudi整合hive提交到yarn报错User class threw exception: org.apache.spark.sql.streaming.StreamingQueryException: Following instants have timestamps >= compactionInstant (20210710211157) Instants :[[20210713205004__deltacommit__COMPLETED], [20210713205200__deltac

2021-07-14 15:03:43 852

原创 Hadoop生态

Hadoop生态理解与总结-持续更新

2021-06-30 20:16:47 42

原创 Scala学习笔记-基础篇

Scala 学习笔记1、语法1.变量与常量2.标识符3.字符串4.控制台标准输入2、数据类型1.概览2.基本数据类型3.自动类型转换4.强制类型转换- 原码、反码、补码3.运算符1.算数运算符2.关系运算符3.==与equals4.逻辑运算符5赋值运算符6.位运算符7.运算符的本质4.流程控制1.分支控制2.循环控制1.for范围遍历-to集合遍历循环守卫循环步长循环嵌套引入变量练习2.循环返回值3.while1.循环中断异常breakable5.函数编程函数基础1.函数基本语法2.函数和方法的区别3.函数

2021-06-12 22:40:55 338

原创 Java线程与IO拷贝文件

Java文件操作IO+线程-->复制文件IO+线程–>复制文件public class Test { // 测试 @Test public void test() throws IOException { turnFile(new File("E:\\学习文件\\shimmer"), new File("E:\\学习文件\\SHIMMER")); } /** * 文件复制控制方法 */ public void turn

2021-05-19 20:38:42 90

原创 从零开始搭建Hadoop集群

2021-05-08 17:42:32 196

原创 ZooKeeper常见问题

分部式协调组件zookeeper常见问题IP映射问题,如果使用主机名,那么需要确保主机名正确,同时,zookeeper的配置文件一个为两个,一个是安装目录下的新建的zkdata下的myid,其内容为server序号,比如你的安装目录下的/conf/zoo.cfg文件里面配了三台zookeeper,那么,你的对应zookeeper下的myid文件的内容就分别应该是:ha2 --> 1ha3 --> 2ha4 --> 3# 主机名文件/etc/hosts

2021-05-07 22:37:23 391

原创 镜像网站

主推 清华大学 与 阿里云 镜像网站清华大学开源镜像网站(点我)使用方法:进入主页在右面找到常用镜像如果里面没有你想要的,或者需要特别版本,可以直接搜索以上

2021-04-25 10:48:24 75

原创 JavaWeb项目理解

JavaWeb项目目录结构理解/MVC开发结构初识粗浅理解,新手可看一般的JavaWeb项目至少包含以下目录结构entrydaoservicecontrollerresources:存放资源上理解Dao:只做了有关sql语句的相关事情entry:实体类,对应数据库中的表service:调用dao层的sql语句执行,但在执行是需要额外的操作,比如打开session,注册mapper对象等controller:这里就是提供外部调用的位置了,需要什么业务,去service里拿,只

2021-04-22 14:32:23 185

原创 Java日历类,Calendar

持续学习输入年份与月份,打印当月的日历public static void theCalendar(int year, int month) { Calendar calendar = Calendar.getInstance(); calendar.set(Calendar.YEAR, year); calendar.set(Calendar.MONTH, month - 1); calendar.set(Calendar....

2021-04-01 10:24:03 40

原创 Java基础练习-循环嵌套

package d4;import java.util.Scanner;/** * description:输入两个数和一个运算符,返回计算结果 * * @author shimmer * @date 2021/3/25 15:27 */public class D4 { public static void main(String[] args) { Scanner sc = new Scanner(System.in); double m,n;

2021-03-25 16:10:06 92

原创 Java循环练习

输入6个数,返回最大值与最小值的差`package d4;import java.util.Scanner;/**description:输入 6 数,返回最大值与最小值的差@author shimmer@date 2021/3/25 15:28*/public class D5 {public static void main(String[] args) {Scanner sc = new Scanner(System.in);D5 d = new D5();S.

2021-03-25 15:57:06 50

原创 Java简单登录界面,循环控制练习

将不同功能放在不同的方法中package d4;import java.util.Scanner;/** * description:登陆界面模块化,将功能分散到方法中 * * @author shimmer * @date 2021/3/24 18:55 */public class D3 { static String user = "root"; static String pwd = "admin"; public static void main(S

2021-03-25 15:55:49 447

原创 输入整数求各位数字之和

Java练习public class D2 { public static void main(String[] args) { Scanner sc = new Scanner(System.in); int num = 0; System.out.println("请输入需要计算的整数:"); int inp = sc.nextInt(); while (inp>0){ //测试输出

2021-03-25 11:36:50 1099

原创 Java求100以内素数和

Java练习public class D4 { public static void main(String[] args) { int sum = 0; for (int i = 2; i <= 100; i++) { int j = 2; for (; j < i; j++) { if (i % j == 0) { break;

2021-03-25 11:34:09 2840

原创 Java流程控制练习

Java学习第三天题目:实现简单登录界面public class Work2 { static String user = "root"; static String pwd = "admin"; public static void main(String[] args) { Scanner scan = new Scanner(System.in); //界面循环 while (true) {

2021-03-25 11:18:47 54

原创 Socket编程学习

import org.junit.jupiter.api.Test;import java.io.ByteArrayOutputStream;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;import java.net.InetAddress;import java.net.ServerSocket;import java.net.Socket;/** * 描述: *

2020-09-23 16:25:19 85

原创 计算机图形学考试复习

计算机图形学考试复习1、计算机图形学的概念,应用计算机图形学:是研究如何在计算机中绘制图形、以及如何利用计算机进行图形的计算、处理和显示的图像一门学科。计算机游戏、计算机辅助设计、计算机艺术、虚拟现实、计算机辅助教学2、黑白,灰度,彩色显示器的帧缓冲容量的计算帧缓冲存储器是用来存储屏幕上像素的颜色值的,显示颜色的种类与帧缓存中每个单元的位数有关:如果屏幕上每个像素的颜色只用一位(Bit)表示,其值非0即1,屏幕只能显示黑白二色图像,称为黑白显示器,此时帧缓冲器只有一个位面。 如果屏幕分辨率

2020-09-03 00:30:51 8272 2

原创 IDEA学习JDBC编程连接MySQL

IDEA连接数据库可以有两种方式1.通过Database建立连接,连接成功后可以直接操作数据库,需要注意的是MySQL 8+版本的Driver与之前的有所不同:com.mysql.cj.jdbc.Driver...

2020-02-21 18:02:51 344

原创 用JavaScript做一个网页时间效果

最近闲着无事打算在家学习一下JavaScript,于是就想到用Date对象做一个网页的时间显示,很简单的函数调用,算是学习之余的小练习。话不多说,直接上代码:<!DOCTYPE html><html> <head> <meta charset="utf-8"> <title>几点啦</title> <...

2020-02-17 14:41:43 961

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除