![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
legendary Captain
这个作者很懒,什么都没留下…
展开
-
zookeeper客户端命令行操作
客户端命令行操作 命令基本语法 功能描述 help 显示所有操作命令 ls path [watch] 使用 ls 命令来查看当前znode中所包含的内容 ls2 path [watch] 查看当前节点数据并能看到更新次数等数据 create 普通创建 -s 含有序列 -e 临时(重启或者超时..原创 2020-10-04 14:00:20 · 118 阅读 · 0 评论 -
MapReduce
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 MapReduce 前言 一、pandas是什么? 二、使用步骤 1.引入库 2.读入数据 总结原创 2020-10-04 13:56:03 · 180 阅读 · 0 评论 -
MapReduce调优
目录 Hadoop优化 1 .MapReduce 跑的慢的原因 2. MapReduce优化方法 2.1 数据输入 2.2 Map阶段 2.3 Reduce阶段 2.4 I/O传输 2.5 数据倾斜问题 2.6 常用的调优参数 3. HDFS小文件优化方法 3.1 HDFS小文件弊端 3.2 小文件解决方案 Hadoop优化 1 .MapReduce 跑的慢的原因 ...原创 2020-09-17 17:47:36 · 475 阅读 · 0 评论 -
zookeeper
zookeeper目录 zookeeper目录 一、zookeeper入门 1.1概述 1.2特点 1.3数据结构 1.4应用场景 二、客户端命令行操作 三、zookeeper内部原理 3.1节点类型 3.2stat结构体 3.3监听器原理(重点) 3.4选举机制(重点) 3.5写数据流程 一、zookeeper入门 1.1概述 Zoo...原创 2020-09-12 20:19:29 · 118 阅读 · 0 评论