2019年12月_GOD_WAR

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月

原创 left join、right join和join的区别

left join、join、right join和inner join等等各种join的区别。网上搜，最常见的就是一张图解图，如下：一张图道清所有join的区别首先，我们先来建两张表，第一张表命名为kemu，第二张表命名为score：一、left join顾名思义，就是“左连接”，表1左连接表2，以左为主，表示以表1为主，关联上表2的数据，查出来的结果显示左边的所有数据...

2019-12-28 09:56:43 12217 2

原创 kafka配置目录树

kafka配置目录树以下是kafka存储在zookeeper上的配置目录树

2019-12-25 16:55:16 284

原创 Apache Kylin 概览

一、什么是 KylinApche Kylin 是 Hadoop 大数据平台上的一个开源 OLAP 引擎。它采用多维立方体（Cube）预计算技术，可以将某些场景下的大数据 SQL 查询速度提升到亚秒级别。相对于之前的分钟乃至小时级别的查询速度。Apache Kylin 也是中国人主导的，第一个 Apche 顶级开源项目，在开源社区有较大影响力。Kylin 对于解决的问题有以下假设：大...

2019-12-25 16:28:53 262

原创中台技术简介

中台业务能力全景中台技术全景移动中台业务中台技术架构图技术选型ServiceMesh...数据中台技术中台各技术组件的高可以部署及多租户问题的解决。redis,mq,db......研发（效能）中台云平台*容器云平台openshift...

2019-12-24 16:35:06 3699

原创 Cloudera Manager+CDH构建大数据平台

一、Cloudera Manager介绍 Cloudera Manager(简称CM)是Cloudera公司开发的一款大数据集群安装部署利器，这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能，使得安装集群从几天的时间缩短在几小时以内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。所以为了同学们能够快速搭建该平台，写出以下教程仅供参考，有什么不足之处请提出，加以改正...

2019-12-24 16:12:07 327 1

原创 HBase表：Rowkey设计

Rowkey设计HBase的rowkey设计可以说是使用HBase最为重要的事情，直接影响到HBase的性能，常见的RowKey的设计问题及对应访问为：Hotspotting的行由行键按字典顺序排序，这样的设计优化了扫描，允许存储相关的行或者那些将被一起读的邻近的行。然而，设计不好的行键是导致 hotspotting 的常见原因。当大量的客户端流量（ traffic ）被定向在集群上的...

2019-12-10 22:15:48 246

提起大数据，不得不提由IBM提出的关于大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性），而对于大数据领域的从业人员的日常工作也与这5V密切相关。大数据技术在过去的几十年中取得非常迅速的发展，尤以Hadoop和Spark最为突出，已构建起庞大的技术生态体系圈。首先通过一张图来了解一下目前大数据领域常用的一...

2019-12-10 20:26:05 244

原创 dubbo 面试题

dubbo是什么dubbo是一个分布式框架，远程服务调用的分布式框架，其核心部分包含：集群容错：提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。远程通讯：提供对多种基于长连接的NIO框架抽象封装，包括多种线程模型，序列化，以及“请求-响应”模式的信息交换方式。自动发现：基于注册中心目录服务，使服务消费方能动态的查找服务提供方，使地址透...

2019-12-03 11:40:45 219