- 博客(5)
- 收藏
- 关注
RSS订阅原创 HBase的简介和安装
HBase简介（1）HBase的定义Hbase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库。（2）HBase数据模型逻辑上，HBase的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。但是从HBase的底层物理存储结构来看，HBase更像是一个multi-dimensional map（多维地图/多维映射）。（3）数据模型1）HBase的数据模型由namespace、table等组成… namespace： 命名空间，类似于关系型数据库中databa
2021-10-11 16:54:57
119
原创 Phoenix简介和安装
Phoenix简介一、简介phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。二、特点1）容易集成，如spark，Hive，Pig，Flume和MapReduce2）操作简单，DML命令以及通过DDL命令创建和操作表和版本化增量更改3）支持HBase二级索引创建安装步骤1、官网下载tar包官网地址：[http://phoenix.apache.org]2、Phoenix部署1）上传并解压tar包[x
2021-10-11 11:02:09
534
原创 Kafaka简单介绍和安装步骤
Kafaka简单介绍[](http://kafka.apache.org/downloads.html)kfaka是一个分布式的基于发布、订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。（传统使用）kfaka是一个开源的分布式事件流平台（enent streaming platform），被千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。（最新定位）官方网站：(http://kafka.apache.org/)Kafka安装部署1.集群规划 ：在集群其
2021-09-30 16:48:46
776
原创 Hive安装
1 Hive安装地址1）Hive官网地址http://hive.apache.org2）文档查看地址https://cwiki.apache.org/confluence/display/Hive/GettingStarted3）下载地址http://archive.apache.org/dist/hive/4）github地址https://github.com/apache/hive2 Hive安装部署2.1）修改hadoop相关配置配置core-site.xml[xxx@had
2021-09-22 20:24:27
115
原创 Hadoop常用的调优参数
Hadoop常用的调优参数一、 资源相关参数（1）以下参数是在用户自己的MR应用程序中配置就可以生效（mapred-default.xml）。1）配置参数：mapreduce.map.memory.mb参数说明：一个MapTask可使用的资源上限（单位;MB），默认为1024。如果MapTask实际使用的资源量超过该值，则会被强制杀死。2）配置参数：mapreduce.reduce.memory.mb参数说明：一个ReduceTask可使用的资源上限（单位;MB），默认为1024。如果MapTa
2021-09-17 19:53:52
113
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人