![](https://img-blog.csdnimg.cn/39b85b6450ef4c968adbf0686430d38d.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Hadoop
文章平均质量分 96
hadoop知识
酒香醉佳人
这个作者很懒,什么都没留下…
展开
-
IDEA编写MapReduce词频统计并打包提交到Hadoop集群运行
运行MR jar包命令:hadoop jar linux本地jar包路径 Windows下的包名.类名 hadoop下的数据集 hadoop下的输出路径原创 2021-05-29 22:26:08 · 3887 阅读 · 0 评论 -
虚拟机(CentOS)下安装配置Hadoop(伪分布式)
一、hadoop相关介绍hadoop是由Apache开发的分布式系统基础架构,是利用集群对大量数据进行分布式处理和存储的软件框架。用户可以轻松地在Hadoop集群上开发和运行处理海量数据的应用程序。Hadoop有高可靠,高扩展,高效性,高容错等优点。Hadoop框架最核心的设计就是HDFS和MapReduce。HDFS为海量的数据提供了存储,MapReduce为海量的数据提供了计算。此外,Hadoop还包括了Hive,Hbase,ZooKeeper,Pig,Avro,Sqoop,Flume,Mahou原创 2021-04-26 12:02:54 · 4114 阅读 · 0 评论 -
Hadoop-HDFS测试题
[单选题]1.查看HDFS系统版本的Shell命令,以下正确的是(C)。A.hadoop -verB.hdfs -verC.hdfs versionD.dfsadmin version2. 查看HDFS系统运行状态的Shell命令,以下正确的是(D)。A.hdfs -reportB.dfsadmin -reportC.hadoop –reportD.hdfs dfsadmin -report[判断题]3. Hadoop存储系统HDFS的文件是分块存储,每个文件块默认大小为32MB。原创 2020-10-23 18:19:13 · 5024 阅读 · 0 评论 -
Hadoop基础测试题
下列选项中哪一门技术属于大数据平台(B)。A.TomcatB.HadoopC.ASP.NETD.Apache[判断题]Hadoop是IBM公司开发的一款商用大数据软件。错误A.正确B.错误[判断题]Hadoop是一个能够对大量数据进行分布式处理的软件框架,能够处理 PB 级数据。正确A.正确B.错误[多选题]大数据技术方案为了简化并行分布式计算,采用( BC)软件模块进行处理。A.JavaB.MapC.ReduceD.SQL[多选题]Hadoop生态系统的优势包含(.原创 2020-10-23 18:04:35 · 2655 阅读 · 0 评论