- 博客(14)
- 资源 (1)
- 问答 (2)
- 收藏
- 关注
转载 springmvc知识点
1、springMVC将属性""空字符串转为nullhttps://blog.csdn.net/qq_29763707/article/details/78475078
2019-05-09 12:00:51 161
转载 Java实体类的属性类型与数据库表字段类型对应关系
Java中的数据类型和SQL中的数据类型有很多不一样,需要仔细区分,不然易在开发中造成莫名的错误。 Java数据类型 Hibernate数据类型 标准SQL数据类型 (PS:对于不同的DB可能有所差异) byte、java.lang.Byte byte TINYINT ...
2019-03-27 17:18:23 6833
转载 hive数据去重方式
一、数据全部重复例如: name score Computer 1600 Phone 12 Phone 12操作步骤:1.复制表结构 CREATE TABLE <new_table> LIKE <old_table>;2.插入去重后的数据 insert overwrite table <n
2019-03-13 14:36:48 9623
转载 cdh集群布局
Cloudera平台软件体系结构Cloudera的软件体系结构中包含了以下模块:系统部署和管理,数据存储,资源管理,处理引擎,安全,数据管理,工具库以及访问接口。一些关键组件的角色信息:硬件配置集群服务器按照节点承担的任务分为管理节点和工作节点。管理节点上一般部署各组件的管理角色,工作节点一般部署有各角色的存储、...
2019-02-02 09:48:56 865 3
转载 spark-submit工具参数说明
执行时需要传入的参数说明Usage: spark-submit [options] <app jar | python file> [app options]参数名称含义--master MASTER_URL可以是spark://host:port, mesos://host:port, yarn, yarn-cluster,yarn...
2019-01-31 08:41:56 152
转载 数据仓库建模之雪花模型和星形模型
数据仓库是用来分析数据并且从现有数据中发现新的价值,主要是用来预测未来的情况。数据仓库并不是解决所有问题的通用结构。它必须集中于某一问题领域,例如航空服务、顾客收益等。数据仓库也有有趣的一面,那就是数据库本身是稳定增长的。数据没有被删除,也不发生变更。我们不需要将冗余数据置于数据库之外(因为加入仓库中的数据经过了数据净化的过程,该过程检查了数据的正确性)来减少复杂性同时增强读取操作的性能。为了...
2019-01-23 18:27:52 988
转载 ElasticSearch中Cluster,Node,Shard,Indices,replicas的基本概念与关系
ElasticSearch中Cluster,Node,Shard,Indices,replicas的基本概念与关系 ...
2019-01-23 15:49:16 601
原创 springcloud服务间调用出现错误,HystrixRuntimeException :api timed-out and no fallback available
在做大数据平台项目期间,由于是微服务架构,存在服务间的调用问题,做压力测试,并发在每秒50左右时,服务A调用服务B时,服务A会出现以下错误:经过查找原因,是因为服务间调用时,FeignClient注解的接口没有实现类,即找不到回调逻辑,所以会报这个错误,正常情况下,应该指明@FeignClient(value = "auth",fallback = AuthLoginClientFa...
2019-01-22 22:47:33 5952
原创 redis三种模式对比
模式类型主从模式(redis2.8版本之前的模式)、哨兵sentinel模式(redis2.8及之后的模式)、redis cluster模式(redis3.0版本之后)主从模式原理同Mysql主从复制的原因一样,Redis虽然读取写入的速度都特别快,但是也会产生读压力特别大的情况。为了分担读压力,Redis支持主从复制,Redis的主从结构可以采用一主多从或者级联结构,Redis主从复制可...
2019-01-12 21:47:32 30406 1
原创 Harbor镜像删除空间回收
Harbor镜像删除空间回收在部署Harbour的主机上运行以下命令以预览会影响哪些文件/镜像 注:上述选项”–dry-run”将打印进度而不删除任何数据指令docker run -it --name gc --rm --volumes-from registry vmware/registry-photon:v2.6.2-v1.5.0 garbage-collect --dry-r...
2019-01-11 11:38:00 547
原创 harbor安装详解
安装步骤1、安装docker 和docker-compose2、下载harbor Binary 地址 https://github.com/vmware/harbor/releases3、解压缩下载好的harbor文件,cd harbor,修改docker-compose.yml和harbor.cfg两个文件,其中docker-compose.yml中默认服务时80端口4、修改...
2019-01-11 11:33:22 1514 1
原创 docker监控工具Portainer的安装
安装Portainerdocker节点操作1 首先关闭selinux,setenforce 02 修改/lib/systemd/system/docker.service#>vi /lib/systemd/system/docker.service ExecStart=/usr/bin/dockerd -H tcp://0.0.0.0:2375 -H unix:///var/r...
2019-01-11 11:11:30 546
原创 Centos7中的docker开启远程访问
目的:开启远程访问端口,主要用于docker监控。在作为docker远程服务的centos7机器中配置:1、在/usr/lib/systemd/system/docker.service,配置远程访问。主要是在[Service]这个部分,加上下面两个参数# vim /usr/lib/systemd/system/docker.service [Service] ExecSt...
2019-01-11 11:07:20 905
项目开发中,用java进行复杂逻辑计算合适呢还是写sql语句计算合适
2017-11-15
TA创建的收藏夹 TA关注的收藏夹
TA关注的人