- 博客(79)
- 资源 (6)
- 收藏
- 关注
原创 查看CPU物理核数和逻辑核数
总核数 = 物理CPU个数 X 每颗物理CPU的核数总逻辑CPU数 = 物理CPU个数 X 每颗物理CPU的核数 X 超线程数# 查看物理CPU个数cat /proc/cpuinfo | grep "physical id" | sort | uniq | wc -l# 查看每个物理CPU中core的个数(即核数)cat /proc/cpuinfo | grep "cpu cores" | uniq# 查看逻辑CPU的个数cat /proc/cpuinfo | grep..
2020-10-10 11:16:35
55
原创 Docker安装Consul
拉取镜像docker pull consul:1.6启动容器docker run -d -p 8500:8500 --name consul 01ff071ff980
2020-09-03 22:01:20
30
原创 HomeBrew换源
cd "$(brew --repo)"git remote set-url origin https://mirrors.ustc.edu.cn/brew.gitcd "$(brew --repo)/Library/Taps/homebrew/homebrew-core"git remote set-url origin https://mirrors.ustc.edu.cn/homebrew-core.gitbrew update
2020-09-03 20:27:01
45
原创 Docker安装Redis5.0
拉取镜像docker pull redis:5.0启动容器docker run -d -p 6379:6379 --name redis f60d84d4d72c --appendonly yes查看日志docker logs 67dade7133d01:C 03 Sep 2020 09:59:07.277 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo1:C 03 Sep 2020 09:59:07.277 # Red...
2020-09-03 18:02:26
104
3
原创 IDEA优化配置
自动生成serialVersionUID关闭每次打开上次默认项目关闭自动更新编码显示行号maven配置自动构建(不推荐)自动引包和优化设置不检查重复代码设置不检查未使用变量设置不检查错误拼写显示内存代码自动完成忽略大小写显示悬浮提示鼠标滚轴修改字体大小显示多行Tab配置浏览器...
2020-09-03 16:48:54
46
原创 SpringBoot整合MyBatis-Plus实战+自动填充+逻辑删除
实体类@Getter@Setter@TableName("user")public class User { @TableId(type = IdType.ASSIGN_UUID) private String id; private String name; private Integer age; private String email; @TableField(fill = FieldFill.INSERT) private S.
2020-08-26 22:51:55
233
原创 SpringBoot通过idea远程debug
idea新建一个Remote远程服务器启动命令java -agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=8888 \-jar dm-admin-service.jar --spring.profiles.active=releaseListening for transport dt_socket at address: 8888本地idea启动debugConnected to t...
2020-08-25 11:58:17
55
原创 SpringBoot整合FastDFS-6.0.4(内网/公网IP配置)
FastDFS安装GitHubhttps://github.com/happyfish100下载https://github.com/happyfish100/libfastcommon/archive/V1.0.42.tar.gzhttps://github.com/happyfish100/fastdfs/archive/V6.04.tar.gz安装FastDFStar -xzvf libfastcommon-1.0.42.tar.gzcd libfa..
2020-08-24 00:14:22
153
原创 Docker安装Nacos1.3.1使用MySQL配置
镜像下载docker pull nacos/nacos-server:1.3.1docker run -d --name nacos --env MODE=standalone -p 8848:8848 nacos/nacos-server:1.3.1docker exec -it 83270df66a49 /bin/bashspring.datasource.platform=mysqldb.num=1db.url.0=jdbc:mysql://10.95.30.61:33.
2020-08-16 21:04:21
290
原创 Docker安装ElasticSearch7.6.1
镜像拉取docker pull elasticsearch:7.6.1配置网络docker network create somenetwork运行容器docker run -d --name elasticsearch --net somenetwork -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" elasticsearch:7.6.1可视化工具安装docker pull mobz/elast...
2020-08-11 11:09:20
170
原创 RSAUtil非对称加密工具类
公要加密System.out.println(RSAUtil.publicKeyEncrypt(keyConstant.PUBLIC_KEY, "12345"));私钥解密System.out.println(RSAUtil.privateKeyDecrypt(keyConstant.PRIVATE_KEY, "上一步加密后的密钥串"));
2020-07-04 14:02:46
92
原创 Spring事物的传播策略
/* * Copyright 2002-2018 the original author or authors. * * Licensed under the Apache License, Version 2.0 (the "License"); * you may not use this file except in compliance with the License. * You may obtain a copy of the License at * * http:.
2020-07-03 10:25:24
75
原创 如何优雅的处理SpringBoot中的多个实现类
接口public interface MyService { String get();}实现一@Servicepublic class MyServiceImpl1 implements MyService { @Override public String get() { return "Impl_1"; }}实现二@Servicepublic class MyServiceImpl2 implements MyServi
2020-06-10 20:48:51
257
原创 Sonar8.3.1降级到7.8
启动[root@xavierzyxue /usr/local/sonar/bin/linux-x86-64]# ./sonar.sh consoleRunning SonarQube...wrapper | --> Wrapper Started as Consolewrapper | Launching a JVM...jvm 1 | Wrapper (Version 3.2.3) http://wrapper.tanukisoftware.orgjvm 1 ...
2020-05-21 09:52:58
194
原创 Docker中运行多个Centos
搜索Centos镜像docker search centosNAME DESCRIPTION STARS OFFICIAL AUTOMATEDcentos ...
2020-05-04 11:04:21
450
原创 Nexus迁移与密码重置
旧仓库停服务bin/nexus stop旧仓库备份tar -czvf sonatype-work.tgz sonatype-work新仓库上传备份文件并覆盖alias cp='cp'cp -rf temp/sonatype-work .重置密码java -jar ./lib/support/nexus-orient-console.jar...
2020-04-21 17:47:56
182
原创 Hive优雅的处理Json数据
准备数据1SOH{"name":"aaa","cource":"english","score":"90"},{"name":"bbb","cource":"chinese","score":"80"},{"name":"ccc","cource":"math","score":"70"}2SOH{"name":"aaa","cource":"english","score":"90"}...
2020-03-20 18:36:37
131
原创 Git常用基本操作整理
git clonegit@gitlab.xxx.com:xxx/xxx.gitgit branch -agit checkout devgit fetch origin dev
2020-03-02 11:04:06
103
原创 Mysql常用操作
创建数据库--创建名称为“testdb”数据库,并设定编码集为utf8CREATE DATABASE IF NOT EXISTS testdb DEFAULT CHARSET utf8 COLLATE utf8_general_ci;新建用户--创建了一个名为:test 密码为:1234 的用户create user 'test'@'localhost' identifie...
2020-02-25 09:58:59
77
原创 Presto-0.228
安装包下载新建etc目录mkdir -p /opt/presto-server/etc新建文件:etc/node.propertiesnode.environment=productionnode.id=hadoopnode.data-dir=/opt/presto-server/data新建文件:etc/jvm.config-server-X...
2020-02-18 18:07:01
166
原创 SpringBoot整合RabbitMQ
配置依赖<dependency> <groupId>org.springframework.cloud</groupId> <artifactId>spring-cloud-starter-bus-amqp</artifactId></dependency>配置参数spring.rabb...
2020-02-16 19:40:45
69
原创 三个线程交替打印A,B,C
代码实现:package thread;import java.util.concurrent.ExecutorService;import java.util.concurrent.Executors;import java.util.concurrent.locks.Condition;import java.util.concurrent.locks.Lock;impor...
2020-02-15 23:45:20
153
原创 linux下root用户竟然也无权限删除
今天发现一个怪事,第一次遇到root用户也没有删除权限,如下:[root@hadoop etc]# rm -f networkservicerm: cannot remove `networkservice': Operation not permitted再次确认权限是否正确[root@hadoop etc]# ll networkservice-rwxrwxrwx ...
2020-02-15 13:36:17
1286
原创 go.sh
go.sh脚本#!/usr/bin/env bashprojectName=group-servicetarget=$1port=$2config_uri=$3health_url="http://127.0.0.1:$port/actuator/health"echo "target = "$targetpid=`ps -ef |grep 'java' |grep ...
2020-02-14 16:58:31
138
原创 Redis3.2.6安装
安装包redis-3.2.6.tar.gz解压tar -xzvf redis-3.2.6.tar.gz安装gcc和makeyum install -y gccyum install -y make编译(在根目录执行)make如下所示: CC slowlog.o CC scripting.o CC bio.o...
2020-02-10 15:43:59
203
原创 Spark2.3.0+新特性
参考http://spark.apache.org/docs/2.3.0/sql-programming-guide.html#broadcast-hint-for-sql-queries说明广播提示引导Spark在将每个指定表与另一个表或视图连接时广播它们。当Spark决定连接方法时,广播散列连接(i.e., BHJ)优先,即使统计数据高于配置spark.sql.autoBro...
2020-01-30 17:43:22
230
原创 Spark分组TopN(SQL风格SDL风格)另附:RDD操作
第一种:SQL风格package sqlimport org.apache.log4j.{Level, Logger}import org.apache.spark.rdd.RDDimport org.apache.spark.sql.{DataFrame, SparkSession}/** * * @ClassName: SparkSQL * @Descripti...
2020-01-30 15:37:56
1710
原创 Saiku
参考http://kylin.apache.org/blog/2019/05/23/saiku-kylin-molap/https://mondrian.pentaho.com/documentation/schema.php简介Saiku 是一个用于 OLAP 分析的套件。用户可在浏览器中通过拖拽的方式进行分析。降低了使用者的学习成本。它能够连接多种数据源,如 Micros...
2020-01-29 23:13:15
2753
1
原创 大数据踩过的坑
本篇文章主要针对在大数据实战过程中遇到问题的总结!!!Yarn连接错误:20/01/27 15:29:53 INFO Client: Retrying connect to server: 0.0.0.0/0.0.0.0:8032. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(...
2020-01-27 14:16:56
167
原创 Kylin(SQL on HBase)
参考http://kylin.apache.org/docs24/install/index.html介绍Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。安装报错Caused by:...
2020-01-05 21:31:56
616
2
原创 Zeepelin
参考http://zeppelin.apache.org/docs/0.8.2/quickstart/install.html#installhttp://zeppelin.apache.org/docs/0.8.2/interpreter/hive.htmlhttp://zeppelin.apache.org/docs/0.8.2/interpreter/jdbc.html#apac...
2020-01-05 21:10:04
86
原创 Linux@ulimit
报错:2020-01-05 12:58:48,019 INFO [ProcedureExecutor-2] master.AssignmentManager: Unable to communicate with hadoop,16020,1578200311421 in order to assign regions,java.io.IOException: java.io.IOEx...
2020-01-05 17:54:24
74
原创 Mysql5.7中的环境变量
版本相关show variables like 'version%'version 5.7.28version_comment MySQL Community Server (GPL)version_compile_machine x86_64version_compile_os Linux密码相关show variables like ...
2019-12-25 10:09:30
319
原创 Hue整合HBase
Hue安装关于Hue的编译和安装详见我的另一片博客:https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hue[hbase] hbase_clusters=(Cluster|hadoop:9090) hbase_conf_dir=/home/hadoop/hbase/conf启动测...
2019-12-21 16:37:17
350
原创 HBase1.4.12
介绍当您需要对大数据进行随机、实时的读写访问时,请使用Apache HBase™。该项目的目标是在普通硬件集群上托管非常大的表(数十亿行X数百万列)。Apache HBase是一个开源的、分布式的、版本化的、非关系型数据库,它模仿了谷歌的Bigtable:一个用于结构化数据的分布式存储系统。正如Bigtable利用谷歌文件系统提供的分布式数据存储一样,Apache HBase在Hadoop和H...
2019-12-15 22:14:29
357
原创 Hue整合Yarn
Hue安装关于Hue的编译和安装详见我的另一片博客:https://blog.csdn.net/DataIntel_XiAn/article/details/103543368Hue配置 [[yarn_clusters]] [[[default]]] resourcemanager_host=hadoop resourcemanager_p...
2019-12-15 18:05:41
428
原创 Hue整合MySQL
Hue安装关于Hue的编译和安装详见我的另一片博客:https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hue [[[mysql]]] nice_name="My SQL DB" name=huemeta engine=mysql host=mysql port=3308...
2019-12-15 17:41:21
458
原创 Hue整合Hive
Hue安装关于Hue的编译和安装详见我的另一片博客:https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置Hivehive-site.xml <!-- TCP的监听端口 --> <property> <name>hive.server2.thrift.port...
2019-12-15 17:13:48
662
原创 Hue整合HDFS
Hue安装关于Hue的编译和安装详见我的另一片博客:https://blog.csdn.net/DataIntel_XiAn/article/details/103543368配置hadoophdfs-site.xml <!-- Enable WebHDFS (REST API) in Namenodes and Datanodes. --> <prop...
2019-12-15 16:30:55
687
原创 Hue4.2.0
介绍Hue是一个基于web的交互式查询编辑器,允许您与数据仓库进行交互参考https://gethue.com/https://github.com/cloudera/huehttps://docs.gethue.com/administrator/installation/https://docs.cloudera.com/documentation/enter...
2019-12-15 13:43:34
890
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人 TA的粉丝