![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
2.9 本科课程大数据基础
本科课程大数据基础
Bryce1010_贤哉回也
github: https://github.com/Bryce1010
\n
e-mail: bryceyx@gmail.com
展开
-
本科课程大数据基础
大数据技术原理与应用原创 2018-05-19 21:11:04 · 578 阅读 · 0 评论 -
Hadoop实验二——熟悉常用的HDFS操作
编程实现以下指定功能,并利用Hadoop提供的Shell命令完成相同任务: (1) 向HDFS中上传任意文本文件,如果指定的文件在HDFS中已经存在,由用户指定是追加到原有文件末尾还是覆盖原有的文件; shell命令实现 首先启动所有的hadoop应用 上传本地文件到HDFS hadoop fs -put text.txt /Test/追加到文件末尾的指令 hado...原创 2018-07-30 10:26:36 · 22444 阅读 · 3 评论 -
Hadoop实验三——熟悉常用的HBase操作
编程实现以下指定功能,并用Hadoop提供的HBase Shell命令完成相同任务: (1) 列出HBase所有的表的相关信息,例如表名、创建时间等; Shell命令实现:list(2) 在终端打印出指定的表的所有记录数据;scan 's1'(3) 向已经创建好的表添加和删除指定的列族或列;在s1表中添加数据put 's1','yangxian'...原创 2018-07-30 10:25:57 · 38284 阅读 · 6 评论 -
MapReduce编程初级实践
编程实现文件合并和去重操作 对于两个输入文件,即文件A和文件B,请编写MapReduce程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新的输出文件C。下面是输入文件和输出文件的一个样例供参考。 输入文件A的样例如下: 20150101 x 20150102 y 20150103 x 20150104 y ...原创 2018-07-30 10:25:34 · 19619 阅读 · 5 评论