- 博客(2)
- 收藏
- 关注
原创 Hadoop技术总概
Hadoop1HDFS解决海量数据的存储 一个主节点namenode,多个从节点datanode namenode:存储元数据,响应用户的操作请求。 datanode:存储数据,block64M,有三个副本。secondarynamenode作用:进行元数据的合并,备份元数据。 hdfs格式化以后会生成一个FSimage的镜像文件,用于保存元数据。 fsimage...
2018-04-15 12:07:41 740
原创 利用hive对微博数据统计分析案例
数据样例:[{“beCommentWeiboId”:”“,”beForwardWeiboId”:”“,”catchTime”:”1387157643”,”commentCount”:”682”,”content”:”喂!2014。。。2014!喂。。。”,”createTime”:”1387086483”,”info1”:”“,”info2”:”“,”info3”:”“,”mlevel”:”“...
2018-04-10 22:10:40 4525 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人