大数据
文章平均质量分 88
蔚蓝色天空sky
不抛弃,不放弃、、、
展开
-
Centos7服务器安装Apache Druid,以及文件数据摄入、kafka实时数据流摄入
1、Apache Druid简介Apache Druid是一个实时分析型数据库,旨在对大型数据集进行快速的查询分析("OLAP"查询)。Druid最常被当做数据库来用以支持实时摄取、高性能查询和高稳定运行的应用场景,同时,Druid也通常被用来助力分析型应用的图形化界面,或者当做需要快速聚合的高并发后端API,Druid最适合应用于面向事件类型的数据。Druid通常应用于以下场景:点击流分析(Web端和移动端)网络监测分析(网络性能监控)服务指标存储供应链分析(制造类指标)应用性能指标分析原创 2021-04-10 00:06:07 · 506 阅读 · 0 评论 -
Centos7中安装MongoDB(使用Docker方式)及简单使用
1、MongoDB简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。它支持的数据结构非常松散,是类似json的bson格式,因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。Mongo原创 2021-04-05 23:07:26 · 602 阅读 · 0 评论 -
cloudera-quickstart 初体验
1、cloudera-quickstart提供了集成了大部分大数据组件的虚拟机镜像系统,包括hadoop,hbase,hive,hue,spark,zookeeper等等,是cloudera定制的版本,还有cloudera的管理组件,基本上不用配置,我下载了vmware的镜像。vmware的镜像下载地址:cloudera-quickstart-vm-5.5.0-0-vmware.zip2、下载后,直接解压,然后用vmware直接打开文件–>打开–>选择cloudera-quickstart原创 2020-10-28 19:24:13 · 1055 阅读 · 3 评论 -
CDH6.2.0集群搭建
1、准备工作1.1 首先我们要准备三台centos7机器,这三台centos7机器的ip、hostname分别为IPhostname192.168.1.11master192.168.1.12slave01192.168.1.13slave02原创 2020-10-27 21:16:37 · 647 阅读 · 0 评论 -
HBase单机版安装部署
1、安装前的环境准备工作,先要一台centos7机器,并安装JDK和Hadoop。参考:Hadoop2.7.3在centos7上的单机版安装部署注:需要注意hadoop的版本和HBase的版本centos版本:CentOS-7.4-x86_64-DVD-1708.isoJDK版本:jdk-8u231-linux-x64.tar.gzHadoop版本:hadoop-2.7.3.tar.gzHBase版本:hbase-2.2.6-bin.tar.gz2、HBase安装包下载下载地址:https原创 2020-10-17 23:41:16 · 2520 阅读 · 0 评论 -
ElasticSearch 6.3.0安装与配制
1、环境准备1.1 使用虚拟机安装centos,如下图虚拟机中安装centos可以参考:在VirtualBox中安装CentOS7详解(Mac版)1.2 centos中关闭防火墙## 查看防火墙状态firewall-cmd --state## 停止firewallsystemctl stop firewalld.service## 禁止firewall开机启动systemctl disable firewalld.service 1.3 安装jdk1.8安装包版本:jdk-8原创 2020-09-14 10:40:25 · 354 阅读 · 0 评论 -
Google MapReduce/GFS/BigTable三大技术的论文中译版
Google的三大核心技术MapReduce、GFS和BigTable的论文都已经被翻译成高质量的中文,更巧的是,这三篇中译版的原发地都是CSDN的Blog。其中最新的一篇是张凌云在一个月之前发表的MapReduce论文,最早的一篇是Xu Lei发表于2005年11月的GFS论文。这三篇论文翻译质量相当高,三位译者作出了非常了不起的、实实在在的贡献,真是应该好好感谢他们! 为了方便大...转载 2018-04-07 18:22:41 · 1169 阅读 · 0 评论