SparkSQL（Spark-1.4.0)实战系列（三）——SparkSQL应用案例

最新推荐文章于 2023-06-12 15:33:04 发布

VIP文章 zhouzhihubeyond

最新推荐文章于 2023-06-12 15:33:04 发布

阅读量7.8k

点赞数 1

分类专栏： Spark 文章标签： Spark Spark1-4 SparkSQL DataFrame 案例实战

本文链接：https://blog.csdn.net/lovehuangjiaju/article/details/46946533

版权

将实验数据Date.txt、Stock.txt、StockDetail.txt(hadoop fs -put /data /data）上传到HDFS上，如下图所示
这里写图片描述

Date.txt格式如下：

//Date.txt文件定义了日期的分类，将每天分别赋予所属的月份、星期、季度等属性  
//日期，年月，年，月，日，周几，第几周，季度，旬、半月 
2014-12-24,201412,2014,12,24,3,52,4,36,24

Stock.txt格式如下：

//Stock.txt文件定义了订单表头  
//订单号，交易位置，交易日期  
ZYSL00014630,ZY,2009-5-7

StockDetail.txt格式如下：

//订单号，行号，货品，数量，价格，金额  
HMJSL00006421,9,QY524266010101,1,80,80

关注