Hadoop
文章平均质量分 61
z小郑不会敲代码
我不会敲代码
展开
-
Apache ZooKeeper(Hadoop)详细原理和使用
例如,如果 zxid1小于 zxid2,说明 zxid1 操作先于 zxid2 发生,zxid 对于整个zk 都是唯一的,即使操作的是不同的 znode。dataVersion:数据版本号,每次对节点进行 set 操作,dataVersion 的值都会增加 1(即使设置的是相同的数据),可有效避免了数据更新时出现的先后顺序问题。首先来说一下zookeeper的工作原理,它是由leader来进行对事务请求的调度和处理,然后follower处理非客户端的事务请求。通过命令 get,可以获得节点的属性。原创 2024-07-25 16:02:15 · 1626 阅读 · 0 评论 -
关于HDFS对数据的写入和读取操作全流程详细图解
关于HDFS对数据的写入和读取操作全流程详细图解原创 2024-07-24 09:15:19 · 272 阅读 · 0 评论 -
分布式存储 HadoopHDFS(此文章直接让你从小白变成入门!!!)
作用: 删除参数指定的文件和目录,参数可以有多个,删除目录需要加-r参数 如果指定-skipTrash选项,那么在回收站可用的情况下,该选项将跳过回收站而直接删除文件;否则,在回收站可用时,在HDFS Shell 中执行此命令,会将文件暂时放到回收站中。应用: hadoop fs -put /root/1.txt[linux] /dir1 [hdfs] #上传文件 hadoop fs –put /root/dir2 / #上传目录。原创 2024-07-17 21:03:05 · 534 阅读 · 0 评论