![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Linux
默默谦行
这个作者很懒,什么都没留下…
展开
-
安装Spark,搭建伪分布式和完全分布式(3节点)
安装Spark,搭建伪分布式和完全分布式(3节点)搭建伪分布式搭建完全分布式搭建伪分布式解压缩文件tar -zxvf /opt/software/spark-2.1.0-bin-hadoop2.7.tgz -C /opt/module/因为spark和hadoop的目录结构相似,都有bin和sbin目录,为了防止冲突,就不配合环境变量了进入conf目录,对配置文件重命名mv spa...原创 2020-02-29 17:00:09 · 374 阅读 · 0 评论 -
redis 事务,与memocache的区别和持久化
redis 事务和持久化Redis 事务分为三个阶段:乐观锁和悲观锁悲观锁:乐观锁:监视命令Redis事务的三个特性1.单独的隔离操作2.没有隔离界别的概念3.不保证原子性memocache与redis的区别Redis持久化RDB(Redis DataBase)备份fork设置RDB文件存储地址rdb的保存策略rdb的优缺点AOF(Append Of File)AOF同步频率设置AOF重写AOF优...原创 2020-02-29 16:39:25 · 422 阅读 · 0 评论 -
redis key+五大数据类+原子性
redis key+五大数据类型Redis的原子性key五大数据类型之String五大数据类型之List五大数据类型之Set五大数据类型之Hash五大数据类型之zset(sorted set)Redis的原子性所谓原子操作是指不会被线程调度机制打断的操作。这种操作一旦开始,就会一直运行到结束,中间不会有任何的context switch(切换到另一个线程)1.在单线程中,能够单条指令中完成的...原创 2020-02-29 14:59:17 · 2853 阅读 · 0 评论 -
Linux 工具脚本:xsync集群分发脚本
Linux 工具脚本:xsync集群分发脚本xsync集群分发脚本1.首先所有节点都安装rsync2.创建xsync集群分发脚本复制代码路径最后,修改权限xsync集群分发脚本1.首先所有节点都安装rsyncyum install rsync -y2.创建xsync集群分发脚本touch xsyncvim xsync复制代码路径复制代码路径:https://blog.cs...原创 2020-02-28 20:53:20 · 539 阅读 · 0 评论 -
linux下 zookeeper-3.4.10安装,命令行基础命令,过半机制,奇数原则
linux下 zookeeper-3.4.10安装,命令行基础命令,过半机制,奇数原则zookeeper安装基础命令启动zookeeper(集群,最少两个)查看当前节点的zk状态启动zk客户端显示所有操作命令:help普通创建(永久节点):create获得节点的值:get path [watch]设置节点的具体值:set使用 ls 命令来查看当前znode中所包含的内容删除节点:delete和 递...原创 2019-12-10 21:52:06 · 238 阅读 · 0 评论 -
大数据学习之 hbase1.3.1安装
大数据学习之 hbase1.3.1安装1.准备工作,启动ZK和hadoop2.解压缩habse3.修改配置文件进入conf目录hbase-env.sh文件,将46-47行注释,并增加JAVA_HOME配置hbase-site.xml文件regionservers文件,将文件中的localhost改为自己的集群中所有虚拟机的ip4.配置环境变量5.HBase远程scp到其他集群6.启动之前,查看ha...原创 2019-11-28 22:05:25 · 271 阅读 · 0 评论 -
linux之mysql5.7.19安装步骤
linux之mysql5.7.19安装步骤linux之mysql5.7.19安装步骤第一步,导入mysql包到/opt/software/mysql目录下第二步,解压缩mysql到当前版本第三步,检测本地是否有mysql已存在的包第四步,安装mysql的 server、client、common、libs、lib-compat第五步,查看mysql的服务是否启动,启动mysql的服务第六步,查看默...原创 2019-11-13 22:34:07 · 656 阅读 · 0 评论 -
linux之zookeeper-3.4.10安装,命令行命令简单使用及JAVA API的简单实现
zookeeper-3.4.10在Linux系统安装,命令行命令简单使用及JAVA API的简单实现zookeeper-3.4.10在linux上安装步骤命令行操作1.启动zookeeper(集群,最少两个)2.启动zk客户端常用命令:JAVA API的简单应用pom.xmlAPI 简单应用分布式秒杀pom.xmlzookeeper-3.4.10在linux上安装步骤准备工作,将zookeep...原创 2019-11-07 21:29:46 · 276 阅读 · 0 评论 -
大数据学习之 HDFS IO API的简单使用
大数据学习之三点五 HDFS IO API的简单使用以及四大机制和上传下载HDFSIO流 API练习HDFS四大机制1、心跳机制2、机架策略——副本存放策略3、负载均衡4、安全模式HDFS写入与下载HDFSIO流 API练习import java.io.FileOutputStream;import java.io.FileInputStream;import org.apache.had...原创 2019-10-27 21:08:03 · 278 阅读 · 0 评论 -
大数据学习之 HDFS API的简单使用
HDFS API的简单使用需要配置的pom.XML文件需要在****中添加如下内容 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> ...原创 2019-10-20 15:41:57 · 305 阅读 · 0 评论 -
大数据学习之 安装jdk
安装jdk卸载现有jdk查询是否安装java软件rpm -qa|grep java如果安装的版本低于1.7,卸载该jdkrpm -e 软件包名字安装jdk在/opt目录下创建两个子文件mkdir /opt/modulemkdir /opt/software解压jdk到/opt/module目录下tar -zxvf jdk-8u144-linux-x64.tar.gz -C /...原创 2019-10-19 15:58:18 · 191 阅读 · 0 评论 -
大数据学习之 搭建伪分布式和完全分布式
搭建伪分布式和完全分布式搭建伪分布式1.在安装的Hadoop目录下的etc/hadoop路径下,找到core-site.xml文件2.在中写入下面的内容代码如下,需要根据自身linux情况进行更改主机名和hadoop版本号:<property> <name>fs.defaultFS</name> <value>hdfs...原创 2019-10-19 15:51:45 · 1648 阅读 · 1 评论