ripple_quan-CSDN博客

原创 hadoop2.x集群安装配置

第1步：准备三台虚拟机，一台作为master，两台作为slave。第2步：三台虚拟机必须能访问外网，并且能相互ping通。第3步：查看三台主机的名字，为后续使用ssh能互相连接。分别为master，slave1，slave2 分别查看三台虚拟机。查看命令 hostname ...

2018-11-21 18:01:16 199

原创 HBase数据库默认配置参数

配置参数默认参数值描述 hbase.tmp.dir ${java.io.tmpdir}/hbase-${user.name} 本地文件系统的零时目录 hbase.rootdir ${hbase.tmp.dir}/hbase，hdfs://...

2019-10-29 15:22:28 1787

翻译 Linux 系统日常维护

Linux系统日常维护Liunx系统基本知识1.1发行版 lsb_realease -a 适用于大多数的Linux 系统1.2内核版本uname -auname -r1.3基本命令Linux系统命令格式命令命令选项命令描述1.4文件目录名称全称用途 ...

2019-07-09 20:48:19 2926

转载 VMWare三种网络模式

VMWare三种网络模式在VMware中，虚拟机的网络连接主要是由VMware创建的虚拟交换机(也叫做虚拟网络)负责实现的，VMware可以根据需要创建多个虚拟网络。在Windows系统的主机上，VMware最多可以创建20个虚拟网络，每个虚拟网络可以连接任意数量的虚拟机网络设备；在Linux系统的主机上，VMware最多可以创建255个虚拟网络，但每个虚拟网络仅能连接32个虚拟机网络设...

2018-11-10 11:36:45 195

原创大数据的概念和来源

1.起源起源 2008年9月，美国《自然》杂志，正是提出“大数据”概念 2011年2月1日，美国《科学》杂志，通过社会调查的方式，第一次分析了大数据对人们生活的影响 2011年5月，麦肯锡研究院分布报告。大数据是指其大小超出了常规数据库工具获取，存储，管理和分析能力的数据集。特征 4V特征（value，volume，velocity，variety...

2018-11-10 11:35:43 28047 1

转载 HADOOP理解

1.什么是hadoop？起源于Google的集群系统，实现一个分布式的文件系统（Hadoop distributed File System）,HDFS. Hadoop是一个由Apache基金会所开发的分布式系统基础架构。最初的核心组件有GFS(Google File System),MapReduce，bigtable（快速查询数据）一个大型分...

2018-11-10 11:34:40 467

转载 HDFS(hadoop distributed File System)详解

HDFS(hadoop distributed File System)分布式文件系统特点：高容错性（多个文本副本存储），价格低，高吞吐量。常见的系统 gfs，HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS。 Hdfs总体上采用了master/slave 架构，主要由以下几个组件组成：Client 、Name...

2018-11-10 11:29:18 1229