大数据
北漂大数据菜鸡why
这个作者很懒,什么都没留下…
展开
-
我对现在大数据的认识
随着互联网的发展,互联网跟人们的生活息息相关,人们在通过获取信息的同时,也在为互联网原创 2016-04-07 22:47:54 · 863 阅读 · 0 评论 -
大数据平台的一些认识
大数据平台的主流架构大体就是通过flume来获取数据,然后可以存贮到hdfs中,也可以发送到kafka进行storm的实时计算,存储到hdfs中的数据可以进行mapreduce进行清洗,然后可以选择存储到hive和hbase,在hive和hbase进行mapreduce或者spark计算,然后实现数据的分析进而通过sqoop导入到mysql或oracle数据库中通过web进行可视化。 大数据呢,原创 2016-05-18 14:30:10 · 382 阅读 · 0 评论