hadoop
tc_lwh
有趣的皮囊
展开
-
Hadoop的集群安装
今天开始hadoop学习。一开虚拟机就出现各种状况。 状况一 vim 编辑器出现中文乱码。 一开始以为是编码集的问题,去看了下编码集 编码集就是utf-8,而且在命令行中可以输入中文。可能就是vim的问题。 解决办法 打开~/etc/vimrc,添加 `set fileencodings=utf-8,ucs-bom,gb18030,gb...原创 2018-08-14 20:43:14 · 326 阅读 · 0 评论 -
最全Hadoop环境搭建
https://blog.csdn.net/GitChat/article/details/77849331原创 2018-09-05 09:40:01 · 123 阅读 · 0 评论 -
hadoop自我检测(面试题)
1、hadoop是个什么东西? : 回答时,精髓:清晰,明确,不含糊, – 但不求多深多全,不能有明确的错 2、hdfs的用途是什么? <–描述开放式问题的套路:先勾勒出事物的轮廓、骨架、再逐层填充细节–> 储海量文件、为分布式数据处理做支撑 是一个分布式的文件系统 系统中有多重角色,核心角色是namenode 和datanode namenode负责管理元数据 datanode负...原创 2018-11-13 23:18:59 · 168 阅读 · 0 评论 -
flume java.lang.OutOfMemoryError: GC overhead limit exceeded
解决办法: <1>ps -aux|grep flume 查看刚才启动的flume进程,发现如下信息 /usr/jdk/bin/java -Xmx20m -Dflume.root.logger=INFO -cp conf <2>于是看一个flume-ng的python脚本,发现 JAVA_OPTS="-Xmx20m" 问题就是出在这里了,然后我把flume-ng脚本里...转载 2018-11-14 22:09:07 · 535 阅读 · 0 评论