
CDH
大树叶
宠辱不惊,看庭前花开花落;去留无意,望天空云卷云舒。
展开
-
hadoop 分发本地的jar文件的过程讲解
一般情况下,我们会使用bai下面的du命令来运行一个hadoop任务: 这个命令实际上是zhi转化成下面的命令来运行的 dao在RunJar中,会读取abc.jar文件,然后尝试从manifest中提取Main-Class作为mainClass,如果manifest中没有指定,则把abc.jar之后的下一个参数当成mainClass。 接下来,RunJar会在本地创建一个临时目录(下面称为workDir,类似/tmp/hadoop-unjar...),然后把abc.jar解压到这个目录中。然后,把wrokD原创 2020-08-13 15:16:13 · 469 阅读 · 0 评论 -
CDH的安装和配置目录
如果采用Cloudera官方建议的安装方式,即Cloudera Manager使用rpm的方式安装,CDH使用Parcel方式安装,会在操作系统内产生多种多样的目录。CDH安装主要使用的目录包括/etc,/usr,/var,/tmp,/opt共5个目录,不同的目录下保存不同的子文件夹以及多种多样不同的文件内容主要涉及比如安装包,配置文件,执行命令脚本等。本文会详细讲解各个目录的作用以及建议规划的大小。下面是比较系统的参考文章,就不一一搬运了1. 深入分析CDH的安装目录...原创 2020-08-13 15:11:53 · 1260 阅读 · 0 评论