Hadoop
股海孙悟空
wx 公众号 股海孙悟空
展开
-
Hadoop2.7.2之集群搭建(单机)
下载安装Hadoop1、下载地址http://hadoop.apache.org/releases.html1我下载的是2.7.2,官网在2.5之后默认提供的就是64位的,这里直接下载下来用即可2、安装Hadooptar -zxvf hadoop-2.7.2.tar.gz -C /opt/soft13、查看Hadoop是32 or 64 位 参考原创 2017-11-02 15:15:21 · 268 阅读 · 0 评论 -
大数据hadoop 面试经典题
1.在Hadoop中定义的主要公用InputFormat中,默认是哪一个?(A) A、 TextInputFormatB、 KeyValueInputFormatC、 SequenceFileInputFormat 1. 下面哪个程序负责 HDFS 数据存储?(C) A.NameNode原创 2018-03-14 23:13:11 · 1026 阅读 · 0 评论 -
最近经历的一些大数据(Spark/Hadoop)面试题
公司A:1.讲讲你做的过的项目。 项目里有哪些 难点重点注意点呢?2.讲讲多线程吧, 要是你,你怎么实现一个线程池呢?3.讲一下Mapreduce或者hdfs的原理和机制。map读取数据分片。4.shuffle 是什么? 怎么调优?5.项目用什么语言写? Scala? Scala的特点? 和Java的区别?6.理论基础怎么原创 2018-03-14 23:14:33 · 720 阅读 · 0 评论 -
Hadoop面试45个题目及答案
1.Hadoop集群可以运行的3个模式?单机(本地)模式伪分布式模式全分布式模式2. 单机(本地)模式中的注意点?在单机模式(standalone)中不会存在守护进程,所有东西都运行在一个JVM上。这里同样没有DFS,使用的是本地文件系统。单机模式适用于开发过程中运行MapReduce程序,这也是最少使用的一个模式。3. 伪分布模式中的注意点?伪原创 2018-03-14 23:16:32 · 13939 阅读 · 0 评论 -
Hadoop 面试总结
1、简要描述如何安装配置一个开源的hadoop,只描述即可,列出完整步骤。a、创建一个用户和用户组,用来管理hadoop项目b、修改确定ip地址:vim /etc/sysconfig/network-scripts/ifcfg-eth0c、修改主机名:vim /etc/sysconfig/networkd、修改host主机名和ip地址映射:vim /etc/host原创 2018-03-14 23:18:38 · 274 阅读 · 0 评论 -
hadoop2.5.2+zookeeper3.4.6+hbase0.99.2
一、hadoop安装参考二、zookeeper安装用户为hadoop,安装目录为/opt下面上传安装文件到/opt下面root用户解压[root@master opt]$ tar -zxvf zookeeper-3.4.6.tar.gz 修改用户及属组[root@master opt]# chown -R hadoop:hadoop原创 2018-04-14 00:29:03 · 147 阅读 · 0 评论