- 博客(3)
- 收藏
- 关注
原创 Apache NiFi:数据流自动化的利器
Apache NiFi是一个易于使用的,设计用来支持强大的数据流程需求的系统。它允许用户以可视化的方式设计、控制、反馈和监控数据流。NiFi支持从简单的数据传输到复杂的数据转换和系统交互。!
2024-06-26 16:47:11 302
原创 浅谈Spark的特点:与hadoop,storm,flink的区别
本文浅谈一下自己对于spark的理解,并没有什么新东西,大牛可以绕道。刚入行的新手可以看看,尤其面试的时候经常会问到。首先对Spark下一个定义吧,其实Spark就是一个微批处理的大数据计算框架,跟hadoop中的MapReduce一个性质。而区别在于,1.MapReduce只能做离线处理,也就是批处理,而spark即可以做离线处理也可以做实时处理,但值得一提的是,spark的实时处理实际上是一...
2019-06-09 18:23:08 3650
原创 大数据学习心得--hadoop框架
前言本人是IT行业刚入行的新人,在看过许多大佬写的博客后也忍不住想写一些自己的东西。这是本人第一次写博客,技术不够,不敢妄谈一些太过前沿的技术的东西,想简单写写自己学过的东西,就当温故而知新了。本篇便以hadoop框架为主题来写点东西。众所周知,hadoop框架出现已久,hadoop主要由三个部分组成:hdfs、yarn、mapreduce。诚然,作为早期的分布式开源框架,MapReduce实......
2019-05-04 16:41:31 6519
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人