Hadoop
文章平均质量分 72
lger_Pro
这个作者很懒,什么都没留下…
展开
-
熟悉常用的HBase操作,编写MapReduce作业
原创 2018-05-08 21:42:03 · 1035 阅读 · 0 评论 -
HDSF文件操作
在本地Linux文件系统的“/home/hadoop/”目录下创建一个文件txt,里面可以随意输入一些单词. 在本地查看文件位置(ls)在本地显示文件内容 cd /usr/local/hadoop touch test.txt //此处编辑test.txt cat test.txt使用命令把本地文件系统中的“txt”上传到HDFS中的当前用户目录...原创 2018-04-24 22:00:05 · 963 阅读 · 0 评论 -
用mapreduce 处理气象数据集
用mapreduce 处理气象数据集 编写程序求每日最高最低气温,区间最高最低气温气象数据集下载地址为:ftp://ftp.ncdc.noaa.gov/pub/data/noaa - 按学号后三位下载不同年份月份的数据(例如201506110136号同学,就下载2013年以6开头的数据,看具体数据情况稍有变通) - 解压数据集,并保存在文本文件中 - 对气象数据格式进行解析 - 编写...原创 2018-05-09 20:52:11 · 2134 阅读 · 0 评论 -
Hadoop综合大作业
Hadoop综合大作业 要求:用Hive对爬虫大作业产生的文本文件(或者英文词频统计下载的英文长篇小说)词频统计。用Hive对爬虫大作业产生的csv文件进行数据分析,写一篇博客描述你的分析过程和分析结果。...原创 2018-05-24 22:30:57 · 1066 阅读 · 0 评论