![](https://img-blog.csdnimg.cn/20200822115241472.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
分布式架构环境搭建
暂无
AnEra
厚积薄发, 天道酬勤
展开
-
Kafka环境搭建
一. Kafka0.8集群部署安装步骤1. 下载Kafka安装包:http://kafka.apache.org/downloads2. 上传安装包3. 解压4. 修改配置文件 config/server.propertiesbroker.id=0host.name=node1log.dirs=/data/kafkazookeeper.connect=node1:218...原创 2020-03-16 10:40:54 · 136 阅读 · 0 评论 -
RocketMQ环境部署
1. RocketMQ下载Apache:https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.2.0/rocketmq-all-4.2.0-bin-release.zipGithub:https://github.com/apache/rocketmq/2. 环境部署2.1 解压[ ] unzip rocketmq-all...原创 2020-03-12 12:27:14 · 732 阅读 · 0 评论 -
Redis集群水平扩展及Master选举原理
目录1. 集群搭建2. 集群启动3. 集群操作3.1 增加redis节点(1) 安装redis(2)配置8007为集群主节点(3) 配置8008为8007的从节点3.2 移除redis节点(1) 删除8008从节点(2)删除8007主节点4. Redis集群选举原理分析集群由6个节点组成,6个节点分布在三台机器上,采用三主三从的模式,概念图如...原创 2020-02-29 19:24:50 · 1164 阅读 · 0 评论 -
Redi单机, 集群, 伪集群环境搭建
目录1. Redis单机安装2. Redis集群安装(6台linux服务器, Redis3)3. Redis5集群安装(3台linux服务器)4. Redis3伪分布式安装1. Redis单机安装1.下载redis3的稳定版本2. 上传redis-3.2.11.tar.gz到服务器3.解压redis源码包[ ] tar -zxvf redis-3.2.11.tar...原创 2020-02-29 11:30:34 · 244 阅读 · 0 评论 -
Linux环境搭建
linux基础部分搭建1、网络搭建1.1 NAT模式[ ] vi /etc/sysconfig/network-scripts/ifcfg-eth0BOOTPROTO=**static**ONBOOT=yesIPADDR=192.168.2.129NETMASK=255.255.255.0GATEWAY=192.168.2.2 重启网络生效:[ ] service netw...原创 2019-09-12 09:03:52 · 209 阅读 · 0 评论 -
网卡故障:弹出界面eth0: 错误:没有找到合适的设备:没有找到可用于链接System eth0 的设备
1.重启网络是遇到问题2. vi /etc/udev/rules.d/70-persistent-net.rules 查看网卡信息3. /etc/sysconfig/network-scripts/ifcfg-eth0 查看网络配置信息4.步骤二和步骤三中两处MAC地址不同,导致在重启网络时找不到网卡信息5.将步骤二中的MAC地址信息复制,粘贴到步骤三中6.重启网络,成功!...原创 2018-12-25 12:36:37 · 943 阅读 · 0 评论 -
HDFS(zookeeper、hadoop)环境搭建
高可用HDFS集群部署集群规划说明:在hadoop2.0中通常由两个NameNode组成,一个处于active状态,另一个处于standby状态。Active NameNode对外提供服务,而Standby NameNode则不对外提供服务,仅同步active namenode的状态,以便能够在它失败时快速进行切换。hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS...原创 2019-09-12 10:34:05 · 440 阅读 · 0 评论 -
SPARK环境搭建
一、Spark集群部署1.解压:[ ] tar -zxvf /root/apps/spark-2.2.2-bin-hadoop2.7.tgz -C /root/apps/2.修改配置文件:[ ] mv spark-env.sh.template spark-env.sh[ ] mv slaves.template slavesspark-env.sh:export JAVA...原创 2019-09-12 10:48:24 · 175 阅读 · 0 评论 -
数据库(Mysql、Hive、Hbase、MongoDB)环境搭建
MYSQL(单机安装)1. 上传mysql安装包2. 解压:[root@mylove ~]# tar -xvf MySQL-5.6.26-1.linux_glibc2.5.x86_64.rpm-bundle.tar3. 安装mysql的server包[root@mylove ~]# rpm -ivh MySQL-server-5.6.26-1.linux_glibc2.5.x86_6...原创 2019-09-12 11:44:56 · 2073 阅读 · 0 评论 -
数据采集(flume, sqoop)环境搭建
数据采集工具在一个完整的离线大数据处理系统中,除了hdfs+mapreduce+hive组成分析系统的核心之外,还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统,而这些辅助工具在hadoop生态体系中都有便捷的开源框架,如图所示:图:典型大规模离线数据处理平台Flume日志采集框架1. Flume的安装部署1、Flume的安装非常简单,只需要解压即可,当然,前提是已有hado...原创 2019-09-12 14:35:58 · 586 阅读 · 0 评论 -
Nginx环境搭建
Nginx一. 安装部署nginx(单机版)1.上传nginx安装包2.解压nginx[ ] tar -zxvf nginx-1.12.2.tar.gz -C /usr/local/src/3.进入到nginx的源码目录[ ] cd /usr/local/src/nginx-1.12.2/4.预编译[ ] ./configure5.安装gcc编译器[ ] yum -y inst...原创 2019-09-12 14:55:11 · 327 阅读 · 0 评论 -
ElasticSearch环境搭建
ElasticSearch一. ES单机安装1.安装JDK(1.8)2.上传解压Elasticsearch-5.4.33.创建一个普通用户,然后将对于的目录修改为普通用户的所属用户和所属组4.修改配置文件config/elasticsearch.yml[ ] network.host: 192.168.100.2115.启动ES,发现报错[ ] bin/elasticsearch...原创 2019-09-12 17:27:15 · 345 阅读 · 0 评论