自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 多服务器redis集群配置

原文:https://blog.csdn.net/HcJsJqJSSM/article/details/85345196介绍Redis是一款内存高速缓存数据库。Redis全称为:Remote Dictionary Server (远程数据服务),使用C语言编写,Redis是一个key-value存储系统(键值存储系统),支持丰富的数据类型,如:String、list、set、zset、hash。Redis是一种支持key-value等多种数据结构的存储系统。可用于缓存,事件发布或订阅,高

2020-09-25 17:09:03 530

原创 spark配置

介绍高性能并行计算引擎storm和spark的比较:storm:实时计算模型:纯实时,来一条数据,处理一条数据健壮性/容错性:ZooKeeper,Acker,非常强动态调整并行度:支持spark:实时计算模型:准实时,对一个时间段内的数据收集起来,作为一个RDD,再处理健壮性/容错性:Checkpoint,WAL,一般动态调整并行度:不支持原文:https://www.jianshu.com/p/5626612bf10cspark配置1.解压配置文件只用下载spark对应版本,sc

2020-09-25 17:06:48 158

原创 kafka配置

介绍Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据配置1.环境变量/etc/profile# set kafka pathexport KAFKA_HOME=/usr/kafka_2.12-2.6.0export PATH=$PATH:$KAFKA_HOME/binsource /etc/profile2.解压配置tar解压相应kafka版本修改server.properties:broker.id=3#hostnamehost.na

2020-09-24 15:19:44 150

原创 zookeeper+storm配置

zookeeper介绍它是一个分布式服务框架,是Apache Hadoop的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理、发布订阅、命名服务、分布式锁、分布式协调等;Zookeeper 是分为服务端和客户端的, 客户端有 Java 的客户端, 有 Shell 命令行的客户端等, 客户端通过一个类似于文件系统的 API 来访问 Zookeeper 集群。客户端最终是直接访问 Zookeeper 集群, 集群中有两大类

2020-09-22 10:43:48 1429

原创 nis+nfs+autofs环境实现共享主机文件

原文出处nis:https://blog.csdn.net/younger_china/article/details/53130780nfs+autofs:https://blog.csdn.net/weixin_43844928/article/details/103114371前提环境1.实现root用户无密钥登录其他节点:用把master机上的公钥传给slaves也行或者使用nis管理2.在主服务器设置共享文档/home,/share;其他节点共享这两个目录3.配置这些时一定要先关闭防火

2020-09-16 11:10:42 396 1

原创 hadoop-3.1.3+jdk1.8.0_261配置文档

环境hadoop-3.1.3、jdk1.8.0_261注2.x版本的hadoop和3.x版本的有区别,比如:TaskTracker(2.x)在3.x为NodeManager,JobTracker(2.x)在3.x为ResourceManager,配置文件:conf(2.x)和etc(3.x),配置工作服务器:workers(3.x)和slaves(2.x)。服务器集群192.168.233.68 om-ds-1.novalocal192.168.233.76 om-ds-2.novalocal1

2020-09-14 15:15:13 694 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除