不积跬步，无以至千里；不积小流，无以成江海。

RabbitMQ集群是一组RabbitMQ节点（broker）的集合，它们一起工作以提供高可用性和可伸缩性服务。RabbitMQ集群中的节点可以在同一物理服务器或不同的物理服务器上运行。RabbitMQ集群的工作原理是，每个节点在一个虚拟主机中提供服务，并通过网络进行通信和数据同步。当一个节点在集群中宕机时，其他节点可以接管其未处理的消息和队列，并尝试恢复数据同步，从而确保服务的可用性。要建立一个RabbitMQ集群，需要遵循以下步骤：安装RabbitMQ：在每个节点上安装RabbitMQ。

yarn application 查看情况yarn application1、-list 列出所有 application 信息 示例：yarn application -list 2、-appStates <States> 跟 -list 一起使用，用来筛选不同状态的 application，多个用","分隔； 所有状态：ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,

1.安装依赖包pip install -i https://mirrors.aliyun.com/pypi/simple/ hdfs2.例子from hdfs import InsecureClienthdfs_client = InsecureClient('http://lys20191020:50070', user='hdfs')# 查看状态hdfs_client.status('.')#创建目录hdfs_client.makedirs('/test01/pyhdfs',per

1.hbase相关配置的修改修改hbase-site.xml文件如下&lt;?xml version="1.0"?&gt;&lt;?xml-stylesheet type="text/xsl" href="configuration.xsl"?&gt;&lt;!--/** * * Licensed to the Apache Software Foundation (ASF) ...

1.hive的相关配置操作修改hive-site.xml配置文件&lt;?xml version="1.0" encoding="UTF-8" standalone="no"?&gt;&lt;?xml-stylesheet type="text/xsl" href="configuration.xsl"?&gt;&lt;!-- Licensed to

1.下载解压下载地址：http://archive.apache.org/dist/storm/apache-storm-0.9.5/apache-storm-0.9.5.tar.gz解压tar –zvxf apache-storm-0.9.5.tar.gz –C /usr/local/ ln -s /usr/local/apache-storm-0.9.5/ /usr/local...

1.下载解压http://archive.apache.org/dist/mahout/0.9/mahout-distribution-0.9.tar.gz解压到指定目录tar -zxvf mahout-distribution-0.9.tar.gz -c /usr/local/mahout/ 2.配置环境变量vi /etc/profile#增加如下语句expor...

1.下载ooziehttp://archive.cloudera.com/cdh5/cdh/5/oozie-4.1.0-cdh5.5.2.tar.gz解压到指定路径 /usr/local/tar -xvf oozie-4.1.0-cdh5.5.0-sdh.tar.gz 2.修改配置文件修改oozie/conf/oozie-site.xml &lt;property...

关闭防火墙[root@localhost ~]# systemctl stop firewalld.service [root@localhost ~]# systemctl disable firewalld.service Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.Remo...

1.hdfs介绍Hadoop文件系统使用分布式文件系统设计开发。它是运行在普通硬件。不像其他的分布式系统，HDFS是高度容错以及使用低成本的硬件设计。HDFS拥有超大型的数据量，并提供更轻松地访问。为了存储这些庞大的数据，这些文件都存储在多台机器。这些文件都存储以冗余的方式来拯救系统免受可能的数据损失，在发生故障时。 HDFS也使得可用于并行处理的应用程序。2.HDFS的特点它适用于在分...

常用的命令操作根据版本（最新版使用第二种方式）hadoop dfs -命令hdfs dfs -命令# 查看目录hdfs dfs -ls /# 创建文件夹hdfs dfs -mkdir /foodir# 删除文件夹hdfs dfs -rm -r /foodir# 上传文件hdfs dfs -put myfile.txt /foodir/myfile.txt# 查...

1.安装依赖包pip install hdfs2.连接# 连接hdfs服务from hdfs import InsecureClientclient = InsecureClient('http://183.168.10.11:50070', user='root')3.列出当前目录下的所有文件print client.list('/')4.创建新文件，并写入内容d...

1.Hadoop的相关配置文件的修改修改etc/hadoop/core-site.xml 文件&lt;?xml version="1.0" encoding="UTF-8"?&gt;&lt;?xml-stylesheet type="text/xsl" href="configuration.xsl"?&gt;&lt;!-- Licensed under the Apac

1.下载版本http://gethue.com/downloads/releases/3.10.0/hue-3.10.0.tgz2.安装相关de的依赖包sudo yum install ant asciidoc cyrus-sasl-devel cyrus-sasl-gssapi cyrus-sasl-plain gcc gcc-c++ krb5-devel libffi-deve...

Hadoop的进程之间同信使用ssh方式，需要每次都要输入密码。为了实现自动化操作，需要配置ssh免密码登陆方式。(1)cd .ssh(2)ssh-keygen -t rsa 执行4次回车键（3）cp id_rsa.pub  authorized_keys

（1）环境安装的前提条件环境安装的前提条件是安装了JDK和hadoop，具体安装过程参照Hadoop 2.7.3安装与配置------Hadoop学习（1）网址：http://blog.csdn.net/liuyunshengsir/article/details/52816883（2）HBase1.2.3的下载 1.百度云下载地址链接：http://pan.baidu.com...

1.利用yum安装docker2.确保docker安装完成后需要关闭防火墙并重启系统systemctl stop firewallds systemctl disable firewallds注意：执行完上面的命令之后需要重启系统reboot -h(重启系统)闭防火墙3.需要关闭selinux 解决方法：1：setenforce 0(

1. 添加EPEL源在Shell中运行以下命令，安装EPEL源：yum install -y epel-release2. 安装python-pip在Shell中运行以下命令，安装Python-pip软件包：yum install -y python-pip3. 安装docker-compose在Shell中运行以下命令，通过pip安装docker-compose：

一.centos安装rstudio1. 安装EPEL库yum -y install epel-release2. 安装Ryum install R3. 安装OpenSSLyum install openssl098e4. 下载RStudio Server安装包wget http://download2.rstudio.org/rstudio-server-0.98.

1.首先安装python的基础环境anaconda2-4.1.1-Linux-x86_64.sh 安装目录选择/usr/local/anaconda22.增加软连接，修改python的版本ln-s /usr/local/anaconda2/bin/python python3.修改yum依赖配置vim /usr/bin/yum把第一行的#！/usr/bin/python

HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现，类似Google Bigtable利用GFS作为其文件存储系统，HBase利用Hadoop HDFS作为其文件存储系统；Google运行MapReduce来处理Bigt...

 1.1 下载进入要下载的版本的目录，选择.tar.gz文件下载下载链接：http://archive.apache.org/dist/zookeeper/stable/zookeeper-3.4.12.tar.gz 1.2 安装使用tar解压要安装的目录即可，以3.4.12版本为例这里以解压到/usr/myapp，实际安装根据自己的想安装的目录修改（注意如果修改，那后...

1.先进行zookeeper的安装xian详见https://blog.csdn.net/liuyunshengsir/article/details/810851952.下载kafkahttp://archive.apache.org/dist/kafka/1.0.1/kafka_2.12-1.0.1.tgz3.解压tar -xzf kafka_2.12-1.0.1.ygz...

1.ansible安装方式（1）使用yum安装yum install epel-release -yyum install ansible –y（2） 使用pip（python的包管理模块）安装pip install ansible#如果没pip,需先安装pip.yum可直接安装：yum install python-pippip install ansible...

1.下载flume1.6https://mirrors.tuna.tsinghua.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz 2.安装jdk和Hadoop具体参照以前wen'文章3.flume 配置文件修改修改conf目录下的flume-env.sh文件  export JAVA_HOME=/etc/...

1.JDK1.8.0_101的安装与配置（1）百度云下载地址链接：http://pan.baidu.com/s/1i5JOCiL 密码：8hyr（2）下载后在centos6.5中解压路径为/usr/jdk1.8.0_101（3）将java添加到环境变量中vi     /etc/profile添加如下配置export JAVA_HOME=/usr/jdk1.8.0_101