Hadoop综合大作业

Hadoop综合大作业 要求：

1.用Hive对爬虫大作业产生的文本文件（或者英文词频统计下载的英文长篇小说）进行词频统计。

开启功能：

　   1、启动hadoop

2、Hdfs上创建文件夹并查看

　3、上传英文词频统计文本至hdfs

　　　　

　4、启动Hive

　　　　

　5、导入文件内容到表docs并查看

　　　　

　6、进行词频统计

　　　　

　7、显示数据

　　　　

2.用Hive对爬虫大作业产生的csv文件进行数据分析，写一篇博客描述你的分析过程和分析结果。

将爬去的文件放在本地hadoop文件中并启动。

　　

 

转载于:https://www.cnblogs.com/1940370572QQ/p/9102142.html