- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 Flink架构、原理与部署测试及从kafka到flink到hbase
一、Flink架构、原理与部署测试Flink架构、原理与部署测试二、kafka+flink+hbase1.首先创建maven工程。2.依赖文件如下<dependencies> <dependency> <groupId>org.apache.flink</groupId> <a...
2018-06-25 23:12:59 2521
原创 Hadoop MapReduce执行过程详解
分析MapReduce执行过程MapReduce运行的时候,会通过Mapper运行的任务读取HDFS中的数据文件,然后调用自己的方法,处理数据,最后输出。Reducer任务会接收Mapper任务输出的数据,作为自己的输入数据,调用自己的方法,最后输出到HDFS的文件中。 Mapper任务的执行过程详解每个Mapper任务是一个java进程,它会读取HDFS中的文件,解析成很多的...
2018-06-11 12:29:16 1205
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人