- 博客(8)
- 收藏
- 关注
原创 Zookeeper概述
1.概述Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。2.特点1)Zookeeper:一个领导者(Leader),多个跟随者(Follower)组成的集群。2)集群中只要有半数以上节点存活,Zookeeper集群就能正常服务。3)全局数据一致:每个Server保存一份相同的数据副本,Cli
2020-06-04 15:54:41 564
原创 搭建Hadoop集群简要步骤
一、准备n台服务器(关闭防火墙、静态ip、修改好主机名称)二、提前编写好集群分发脚本xsync三、集群配置1.核心配置文件:core-site.xml 指定HDFS中NameNode的地址 指定Hadoop运行时产生文件的存储目录2.配置hadoop-env.sh jdk地址3.配置hdfs-site.xml 指定HDFS副本的数量 指定Hadoop辅助名称节点主机配置4.配置yarn-env.sh jdk地址5.配置yarn-site.xml 指定YARN的ResourceMa
2020-06-03 19:30:28 1370
转载 IDEA中maven+SpringMVC项目引入JS文件的无效的问题
https://www.jianshu.com/p/fe1de2591b3e出现的问题和上链接一样,在所有文件都改好之后,clean一下项目,然后重启IDEA即可成功引入js文件。
2020-04-19 11:20:59 610
原创 Linux系统使用crontab工具每分钟自动执行脚本
1 首先在文件夹中写好脚本 generate_log.sh2 根据crontab规则写好时间表达式,这里我们是每隔一分钟执行一次,因此表达式为 */1 * * * * ,在终端输入 crontab -e表达式后加上要执行脚本的路径。3 脚本即可每分钟自动执行一次。...
2020-02-27 16:45:52 1157
原创 Spark Streaming处理文件系统数据
此代码在win10系统下的IDEA上运行package com.imooc.sparkimport org.apache.spark.SparkConfimport org.apache.spark.streaming.{Seconds, StreamingContext}object FileWordCount { def main(args: Array[String]): ...
2020-02-21 17:30:38 191
转载 SSH远程登录出现 WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! 解决办法
一、问题描述在部署OpenStack环境的时候,配置的静态IP是192.168.5.1,删除了这台虚拟机.重新板建一个虚拟机,IP配置也配置为192.168.5.1.使用真机连接 ssh 192.168.5.1出现如下报错报错的大概意思是192.168.5.1的ECDSA主机密钥已更改,并且您已请求严格检查,远程主机发送的ECDSA密钥指纹信息是和本机的密钥指纹信息不一致ssh链接的...
2020-02-16 15:46:35 459
原创 VMware虚拟机centos显示屏幕太小解决办法
使用VMware安装的centos虚拟机的显示屏幕太小本机系统是windows10关闭系统centos系统,打开虚拟机设置的显示器选择拉伸模式->自由拉伸重新打开成功适应屏大小...
2020-02-15 17:07:07 13702 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人