- 博客(5)
- 资源 (8)
- 收藏
- 关注
RSS订阅原创 Hadoop入门之MapReduce实例二
package kpilog;/* 数据类型： * 110.6.179.88 - - [04/Jan/2012:00:00:02 +0800] "GET /forum.php?mod=attachment&aid=NTczNzU3fDFjNDdjZTgzfDEzMjI4NzgwMDV8MTMzOTc4MDB8MTEwMTcxMA%3D%3D&mobile=no HTTP/1....
2018-07-18 11:31:38
294
原创 Hadoop入门之MapReduce实例一
一、源数据格式user_id,item_id,behavior_type,user_geohash,item_category,time 其中behavior_type为行为类型，具体表示为： 1.浏览 2.收藏 3.加入购入车 4.购买 前十行数据展示：user_id,item_id,behavior_type,user_geohash,item_category,ti...
2018-07-17 21:33:20
2263
原创 Hadoop入门之eclipse对HDFS的常用操作
一、从HDFS读取文件输出到控制台 public static void catFile() throws IOException { //获取配置文件对象 Configuration conf = new Configuration(); //添加配置信息 conf.set("fs.defaultFS","hdfs:/...
2018-07-17 21:01:38
1378
原创 Hadoop入门之window安装单机版Hadoop
安装版本及环境： JDK：1.8.0_121 Hadoop：2.7.1 eclipse ：2018一、准备阶段所有要用到的软件、jar包和windows执行Hadoop必须的一些文件点此下载二、开始安装1、解压hadoop-2.7.1.tar.gz，解压的位置最好和jdk在一个盘且不要在C盘（系统盘），解压过后的目录样式如下： 2、配置系统环境变...
2018-07-15 21:03:46
3723
3
原创 Spark的简单使用之WordCount统计
一、准备要进行统计的文件 可以看到我这里测试的文件名称叫wc.txt 里面的内容也比较少，就六个单词用逗号分隔。二、计算代码scala> val file = spark.sparkContext.textFile("file:///root/Desktop/wc.txt") #文件路径scala> val
2018-07-01 15:26:04
2753
Moo0 VideoResizer v1.29 Installer.exe
2020-02-14
msvcp100d.dll和msvcr100d.dll.rar
2019-06-26
Hadoop入门之MapReduce实训源数据下载
2018-07-17
Windows装Hadoop的一些必须文件和包
2018-07-15
spark-2.0.2-bin-hadoop2.4.tgz
2018-07-01
mysql连接包mysql-connector-java-5.1.27.jar
2018-05-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人