关于spark程序火柴人数据指标的计算

需要实现的要求:自行准备某个领域的数据(可以是电商商品数据、电商订单数据、影视数据、游戏数据、工业互联网数据、手机埋点数据、天气数据、股票数据、房地产数据等等,但不能选新能源车辆数据),并搜集/准备至少五个相关的统计指标,然后写Spark程序完成这些指标的计算。

目录

 一、数据的准备

1、编辑配置相关项,用程序生成随机数据

2、设计五个指标

二、spark程序编写

1、编写java文件,并转换为scala语言开发的scala文件

三、项目总结、遇到的问题以及个人心得


 一、数据的准备

1、编辑配置相关项,用程序生成随机数据

火柴人: 名字, 性别, 阵营, 职业, 胜否, 剩余血量,获得金元宝个数,日期

名字: 长度为14的大小写字母

性别: 男 / 女

阵营: 守序邪恶, 守序善良, 混乱邪恶, 混乱善良

职业: 射手, 法师, 战士, 辅助, 坦克

胜负: 是 / 否

剩余血量: 100  ~  1

获得金元宝个数: 5  ~ 20

日期: 自定义   xxxx年-xx月-xx日

       以下是编写的生成数据的spark程序:

注释:

name:名字

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值