自己制作Hadoop集群的镜像踩坑记录

自己制作Hadoop集群的镜像踩坑记录


不容易,真不容易。几乎是每一行都踩到坑里了。而且现在docker还在跑,最后的结果对不对还未知。索性把整件事记录下来

WORKDIR

这是一个设置运行容器路径的命令,一开始我天真地认为,这里写 /root ,后面COPY的时候写的/tmp 就是类似服务器的绝对路径了。真是又一个坑,它这里的意思就是把workdir的路径作为根路径了,所以我改成 workdir / ,现在还在执行,看结果吧。
后来,先找了个几K的压缩包试了试,终于知道它解压出来的路径居然是跟 workdir下面的。之后又整体的测了测,希望没事了。

FROM

这一行必填,而且我建议必填,不要用from scratch 。因为我的理解是,每次执行dockerFile时,都会基于第一行的镜像来启动一个容器,在那个容器里运行下面的命令的。
一开始我服务器上有很多配置了,我就用了scratch,而且把后面的RUN什么注释了。就是这样,每一次运行都报错,说什么wget没有,甚至目录也没有。我找了一圈下来,才意识到这个问题。
最后,说一下我用的是FROM fedora:36

RUN

这个真的是一个大坑,而且细小的差距,我参考的书里根本没说。一开始我直接写的是 run dnf install wget,我心里想这肯定对啊,昨天都运行了。但就是这行命令,需要做交互的操作,在docker里肯定不给你机会交互的,我查了一下,找到方法。-y参数可以跳过软件的询问,相当于回答了yes

COPY

原本的一个Hadoop压缩包,使用链接下载的,但是自己看着屏幕很心疼,就想能不能用我服务器本地的,直接拷贝一份。这就是不认真看书的我了,我一低头就看见,有一个ADD和COPY命令,正好符合。但是他俩是有区别的,具体的去别处查,我认真思考了下决定用COPY。
然后,这个COPY还不能直接用,他是要把文件放在和dockerfile同一文件夹里的。不然就会报找不到的错。而且,建议新建一个文件夹,不然他会以为所有的文件都要拷贝,这样光是拷贝的功夫就很慢了

总结

剩下的就没什么了,似乎费了好多时间得到的回报不成比例。而且因为涉及到集群的配置,错了一个地方就要重新执行。恰恰是有的包需要下载,又下载很慢。所以还是希望一次成功的好

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值