BigData大数据
文章平均质量分 56
大数据Hadoop等技术探究和实战
小吴同学GOGOGO
一只怀揣梦想的阿柴;五角场某高校同学、某大厂打工人;兴趣方向:OLAP基础架构、大数据存储和计算引擎;「计算机小屋」
展开
-
flink小试牛刀(java版本)-实现wordCount
导语:flink是一款优秀的批处理和流处理的大数据计算引擎,本文将通过flink的java api实现wordCount. 环境准备:idea, maven 实验: 1、maven 内容: <!-- flink--> <!-- https://mvnrepository.com/artifact/org.apache.flink/flink-core --> <dependency> <group原创 2021-09-09 16:03:35 · 663 阅读 · 0 评论 -
大数据经典实验案例-WordCount原理详解和代码书写
大数据经典实验案例-WordCount原理详解和代码书写 本次实验基于hadoop框架和linux环境,所以,请保证您的电脑拥有hadoop环境(hdfs和mapreduce) 实验目的:掌握hadoop的一些基本命令操作和使用JavaAPI进行实验开发。 实验步骤: 启动hdfs 2.通过idea创建一个Java项目,并导入Hadoop相关的依赖包:创建项目通过普通的new一个Javaproject 即可,然后在src下新建一个mapreduce包:如下: 3.导入依赖包:file->rpoj原创 2020-10-14 18:10:42 · 2655 阅读 · 0 评论