西安小伙儿_Mr.ChowSit_CSDN博客-SpringBoot,Java,Hive领域博主

原创查看CPU物理核数和逻辑核数

2020-10-10 11:16:35 55

原创 Docker安装Consul

拉取镜像docker pull consul:1.6启动容器docker run -d -p 8500:8500 --name consul 01ff071ff980

2020-09-03 22:01:20 30

原创 HomeBrew换源

cd "$(brew --repo)"git remote set-url origin https://mirrors.ustc.edu.cn/brew.gitcd "$(brew --repo)/Library/Taps/homebrew/homebrew-core"git remote set-url origin https://mirrors.ustc.edu.cn/homebrew-core.gitbrew update

2020-09-03 20:27:01 45

原创 Docker安装Redis5.0

拉取镜像docker pull redis:5.0启动容器docker run -d -p 6379:6379 --name redis f60d84d4d72c --appendonly yes查看日志docker logs 67dade7133d01:C 03 Sep 2020 09:59:07.277 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo1:C 03 Sep 2020 09:59:07.277 # Red...

2020-09-03 18:02:26 104 3

原创 IDEA优化配置

自动生成serialVersionUID关闭每次打开上次默认项目关闭自动更新编码显示行号maven配置自动构建（不推荐）自动引包和优化设置不检查重复代码设置不检查未使用变量设置不检查错误拼写显示内存代码自动完成忽略大小写显示悬浮提示鼠标滚轴修改字体大小显示多行Tab配置浏览器...

2020-09-03 16:48:54 46

原创 SpringBoot整合MyBatis-Plus实战+自动填充+逻辑删除

实体类@Getter@Setter@TableName("user")public class User { @TableId(type = IdType.ASSIGN_UUID) private String id; private String name; private Integer age; private String email; @TableField(fill = FieldFill.INSERT) private S.

2020-08-26 22:51:55 233

原创 SpringBoot通过idea远程debug

idea新建一个Remote远程服务器启动命令java -agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=8888 \-jar dm-admin-service.jar --spring.profiles.active=releaseListening for transport dt_socket at address: 8888本地idea启动debugConnected to t...

2020-08-25 11:58:17 55

原创 SpringBoot整合FastDFS-6.0.4(内网/公网IP配置)

FastDFS安装GitHubhttps://github.com/happyfish100下载https://github.com/happyfish100/libfastcommon/archive/V1.0.42.tar.gzhttps://github.com/happyfish100/fastdfs/archive/V6.04.tar.gz安装FastDFStar -xzvf libfastcommon-1.0.42.tar.gzcd libfa..

2020-08-24 00:14:22 153

原创 Docker安装Nacos1.3.1使用MySQL配置

镜像下载docker pull nacos/nacos-server:1.3.1docker run -d --name nacos --env MODE=standalone -p 8848:8848 nacos/nacos-server:1.3.1docker exec -it 83270df66a49 /bin/bashspring.datasource.platform=mysqldb.num=1db.url.0=jdbc:mysql://10.95.30.61:33.

2020-08-16 21:04:21 290

原创 Docker安装ElasticSearch7.6.1

镜像拉取docker pull elasticsearch:7.6.1配置网络docker network create somenetwork运行容器docker run -d --name elasticsearch --net somenetwork -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" elasticsearch:7.6.1可视化工具安装docker pull mobz/elast...

2020-08-11 11:09:20 170

原创 RSAUtil非对称加密工具类

公要加密System.out.println(RSAUtil.publicKeyEncrypt(keyConstant.PUBLIC_KEY, "12345"));私钥解密System.out.println(RSAUtil.privateKeyDecrypt(keyConstant.PRIVATE_KEY, "上一步加密后的密钥串"));

2020-07-04 14:02:46 92

原创 Spring事物的传播策略

/* * Copyright 2002-2018 the original author or authors. * * Licensed under the Apache License, Version 2.0 (the "License"); * you may not use this file except in compliance with the License. * You may obtain a copy of the License at * * http:.

2020-07-03 10:25:24 75

原创如何优雅的处理SpringBoot中的多个实现类

接口public interface MyService { String get();}实现一@Servicepublic class MyServiceImpl1 implements MyService { @Override public String get() { return "Impl_1"; }}实现二@Servicepublic class MyServiceImpl2 implements MyServi

2020-06-10 20:48:51 257

原创 Sonar8.3.1降级到7.8

启动[root@xavierzyxue /usr/local/sonar/bin/linux-x86-64]# ./sonar.sh consoleRunning SonarQube...wrapper | --> Wrapper Started as Consolewrapper | Launching a JVM...jvm 1 | Wrapper (Version 3.2.3) http://wrapper.tanukisoftware.orgjvm 1 ...

2020-05-21 09:52:58 194

原创 Docker中运行多个Centos

搜索Centos镜像docker search centosNAME DESCRIPTION STARS OFFICIAL AUTOMATEDcentos ...

2020-05-04 11:04:21 450

原创 Nexus迁移与密码重置

旧仓库停服务bin/nexus stop旧仓库备份tar -czvf sonatype-work.tgz sonatype-work新仓库上传备份文件并覆盖alias cp='cp'cp -rf temp/sonatype-work .重置密码java -jar ./lib/support/nexus-orient-console.jar...

2020-04-21 17:47:56 182

原创 Hive优雅的处理Json数据

准备数据1SOH{"name":"aaa","cource":"english","score":"90"},{"name":"bbb","cource":"chinese","score":"80"},{"name":"ccc","cource":"math","score":"70"}2SOH{"name":"aaa","cource":"english","score":"90"}...

2020-03-20 18:36:37 131

原创 Git常用基本操作整理

git clonegit@gitlab.xxx.com:xxx/xxx.gitgit branch -agit checkout devgit fetch origin dev

2020-03-02 11:04:06 103

原创 Mysql常用操作

创建数据库--创建名称为“testdb”数据库，并设定编码集为utf8CREATE DATABASE IF NOT EXISTS testdb DEFAULT CHARSET utf8 COLLATE utf8_general_ci;新建用户--创建了一个名为：test 密码为：1234 的用户create user 'test'@'localhost' identifie...

2020-02-25 09:58:59 77

原创 Presto-0.228

安装包下载新建etc目录mkdir -p /opt/presto-server/etc新建文件：etc/node.propertiesnode.environment=productionnode.id=hadoopnode.data-dir=/opt/presto-server/data新建文件：etc/jvm.config-server-X...

2020-02-18 18:07:01 166

原创 SpringBoot整合RabbitMQ

配置依赖<dependency> <groupId>org.springframework.cloud</groupId> <artifactId>spring-cloud-starter-bus-amqp</artifactId></dependency>配置参数spring.rabb...

2020-02-16 19:40:45 69

原创三个线程交替打印A，B，C

代码实现：package thread;import java.util.concurrent.ExecutorService;import java.util.concurrent.Executors;import java.util.concurrent.locks.Condition;import java.util.concurrent.locks.Lock;impor...

2020-02-15 23:45:20 153

原创 linux下root用户竟然也无权限删除

今天发现一个怪事，第一次遇到root用户也没有删除权限，如下：[root@hadoop etc]# rm -f networkservicerm: cannot remove `networkservice': Operation not permitted再次确认权限是否正确[root@hadoop etc]# ll networkservice-rwxrwxrwx ...

2020-02-15 13:36:17 1286

原创 go.sh

go.sh脚本#!/usr/bin/env bashprojectName=group-servicetarget=$1port=$2config_uri=$3health_url="http://127.0.0.1:$port/actuator/health"echo "target = "$targetpid=`ps -ef |grep 'java' |grep ...

2020-02-14 16:58:31 138

原创 Redis3.2.6安装

安装包redis-3.2.6.tar.gz解压tar -xzvf redis-3.2.6.tar.gz安装gcc和makeyum install -y gccyum install -y make编译（在根目录执行）make如下所示： CC slowlog.o CC scripting.o CC bio.o...

2020-02-10 15:43:59 203

原创 Spark2.3.0+新特性

参考http://spark.apache.org/docs/2.3.0/sql-programming-guide.html#broadcast-hint-for-sql-queries说明广播提示引导Spark在将每个指定表与另一个表或视图连接时广播它们。当Spark决定连接方法时，广播散列连接(i.e., BHJ)优先，即使统计数据高于配置spark.sql.autoBro...

2020-01-30 17:43:22 230

原创 Spark分组TopN（SQL风格SDL风格）另附：RDD操作

第一种：SQL风格package sqlimport org.apache.log4j.{Level, Logger}import org.apache.spark.rdd.RDDimport org.apache.spark.sql.{DataFrame, SparkSession}/** * * @ClassName: SparkSQL * @Descripti...

2020-01-30 15:37:56 1710

原创 Saiku

参考http://kylin.apache.org/blog/2019/05/23/saiku-kylin-molap/https://mondrian.pentaho.com/documentation/schema.php简介Saiku 是一个用于 OLAP 分析的套件。用户可在浏览器中通过拖拽的方式进行分析。降低了使用者的学习成本。它能够连接多种数据源，如 Micros...

2020-01-29 23:13:15 2753 1

原创大数据踩过的坑

本篇文章主要针对在大数据实战过程中遇到问题的总结！！！Yarn连接错误：20/01/27 15:29:53 INFO Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8032. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(...

2020-01-27 14:16:56 167

原创 Kylin(SQL on HBase)

参考http://kylin.apache.org/docs24/install/index.html介绍Apache Kylin™是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。安装报错Caused by:...

2020-01-05 21:31:56 616 2

原创 Zeepelin

参考http://zeppelin.apache.org/docs/0.8.2/quickstart/install.html#installhttp://zeppelin.apache.org/docs/0.8.2/interpreter/hive.htmlhttp://zeppelin.apache.org/docs/0.8.2/interpreter/jdbc.html#apac...

2020-01-05 21:10:04 86

原创 Linux@ulimit

报错：2020-01-05 12:58:48,019 INFO [ProcedureExecutor-2] master.AssignmentManager: Unable to communicate with hadoop,16020,1578200311421 in order to assign regions,java.io.IOException: java.io.IOEx...

2020-01-05 17:54:24 74

原创 Mysql5.7中的环境变量

版本相关show variables like 'version%'version 5.7.28version_comment MySQL Community Server (GPL)version_compile_machine x86_64version_compile_os Linux密码相关show variables like ...

2019-12-25 10:09:30 319

原创 Hue整合HBase

Hue安装关于Hue的编译和安装详见我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hue[hbase] hbase_clusters=(Cluster|hadoop:9090) hbase_conf_dir=/home/hadoop/hbase/conf启动测...

2019-12-21 16:37:17 350

原创 HBase1.4.12

介绍当您需要对大数据进行随机、实时的读写访问时，请使用Apache HBase™。该项目的目标是在普通硬件集群上托管非常大的表(数十亿行X数百万列)。Apache HBase是一个开源的、分布式的、版本化的、非关系型数据库，它模仿了谷歌的Bigtable:一个用于结构化数据的分布式存储系统。正如Bigtable利用谷歌文件系统提供的分布式数据存储一样，Apache HBase在Hadoop和H...

2019-12-15 22:14:29 357

原创 Hue整合Yarn

Hue安装关于Hue的编译和安装详见我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368Hue配置 [[yarn_clusters]] [[[default]]] resourcemanager_host=hadoop resourcemanager_p...

2019-12-15 18:05:41 428

原创 Hue整合MySQL

Hue安装关于Hue的编译和安装详见我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hue [[[mysql]]] nice_name="My SQL DB" name=huemeta engine=mysql host=mysql port=3308...

2019-12-15 17:41:21 458

原创 Hue整合Hive

Hue安装关于Hue的编译和安装详见我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hivehive-site.xml  <property> <name>hive.server2.thrift.port...

2019-12-15 17:13:48 662

原创 Hue整合HDFS

Hue安装关于Hue的编译和安装详见我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置hadoophdfs-site.xml  <prop...

2019-12-15 16:30:55 687

原创 Hue4.2.0

介绍Hue是一个基于web的交互式查询编辑器，允许您与数据仓库进行交互参考https://gethue.com/https://github.com/cloudera/huehttps://docs.gethue.com/administrator/installation/https://docs.cloudera.com/documentation/enter...

2019-12-15 13:43:34 890