厚积薄发的博客

目录 1.源码下载 2.环境配置 3.打包前注意事项 4.执行最后打包 5.参考 1.源码下载 hadoop2.7.0下载地址 2.环境配置 参考源码目录下的BUILDING.txt 我的环境配置 环境配置 软件名称 软件版本 操作系统 win10 JDK 1.8 microsoft visual studio microsoft visual studio 2017 Protoco...

spark scala 统计单词的个数 import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} object Hello { def main(args: Array[String]): Unit = { System.setProperty("hadoop.home...

统计一共售出多少个商品，一共有多少个顾客，所有商品的累加和，售卖最流行的商品 数据UserPurchaseHistory.csv 用户名称，商品名称，价格 John,iPhone Cover,9.99 John,Headphones,5.49 Jack,iPhone Cover,9.99 Jill,Samsung Galaxy Cover,8.95 Bob,iPad Cover,5.49 ...

spark wordcount 单词统计 文件1.txt hello world hello tom hello lucy tom lucy hello python # -*- coding:utf-8 -*- import os import shutil from pyspark import SparkContext inputpath = '1.txt' outputpat...