- 博客(10)
- 收藏
- 关注
RSS订阅
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块C：实时数据处理-任务二：实时指标计算)
2、使用Flink 消费kafka 中fact_order_detail 主题的数据，统计商城每分钟的GMV（结果四舍五入保留两位小数），将结果存入redis 中（value 为字符串格式，仅存GMV），key 为store_gmv，使用redis cli 以get key 方式获取store_gmv 值，将每次截图粘贴至客户端桌面【Release\模块C 提交结果.docx】中对应的任务序号下（每分钟查询一次，至少查询3 次）。(GMV:所有订单金额，购买商品单价*购买商品数量，包括已下单未付款)
2024-01-02 15:39:43
1511
1
原创 全国职业技能大赛高职组大数据应用开发赛项(电商训练题解析-模块C：实时数据处理)
所有，我们需要考虑的状态为：已下单(1),已取消(-1)，已退款(-1)，退款、签收那些就不考虑了。数据采集器 ---Flume---kafka--Flink--redis。"address":"上海市上海市真光路12889755号3层","invoice_title":"雨林木风计算机传媒有限公司","shipping_comp_name":"韵达","shipping_user":"龚桂芳","order_status":"已签收","province":"上海市","city":"上海市",
2024-03-15 15:09:08
579
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块C：实时数据处理-任务一：实时数据清洗)
需要将order_master 、order_detail 、product_browse 备份至HBase 中（若Int 类型长度不够，可使用BigInt 或Long 类型代替），使用HBase Shell 查看ods:order_master 表的任意2 条数据，查看字段为row_key 与shipping_user、查看ods:order_detail 表的任意2 条数据， 查看字段为row_key 与product_name 、查看ods:product_browse 表的任意2 条数据，查看字段为
2024-01-11 18:51:46
1398
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发电商训练题解析-模块C：实时数据处理-任务二：实时指标计算)
该题解实现电商训练题实时计算的第8题(如果需要历届样题的题解可以添加小编企鹅：2815619722(有偿)，可以提供思路以及各种计算或者安装时、运行时的bug,如有侵权联系删除),兄弟们如果有其他关于实时计算的问题 或者实时计算组件问题可以评论询问小编。
2024-01-05 18:03:46
1298
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块C：实时数据处理-任务二：实时指标计算)
使用Flink 消费kafka 中log_product_browse 主题的数据，统计商品的UV（浏览用户量）和PV（商品浏览量），将结果写入HBase 中的表ads:online_uv_pv 中。其中，表空间为：ads，rowkey 为：计算时的年月日时分秒+商品id，列族为：info，列名为：商品id，商品名称，uv,pv,modified_time。2 然后，在HBase中，创建要写入的数据表online_uv_pv。注意，HBase中使用了命名空间ads，hbase表都位于该ads表空间中。
2024-01-04 10:36:41
1432
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发2023国赛样题解析-模块C：实时数据处理-任务二：实时指标计算)
全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块B：数据采集-任务一：离线数据采集-CSDN博客。
2024-01-03 14:28:28
655
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发2023国赛样题解析-模块C：实时数据处理-任务二：实时指标计算)
全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块B：数据采集-任务一：离线数据采集-CSDN博客。
2024-01-03 13:45:31
1999
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发电商训练题解析-模块C：实时数据处理-任务二：实时指标计算)
该题解实现样题实时计算的第6题(如果需要历届样题的题解可以添加小编企鹅：2815619722(有偿)，可以提供思路以及各种计算或者安装时、运行时的bug,如有侵权联系删除),兄弟们如果有其他关于实时计算的问题 或者实时计算组件问题可以评论询问小编。
2024-01-03 12:27:08
476
1
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发电商训练题解析-模块C：实时数据处理-任务二：实时指标计算)
该题解实现样题实时计算的最5题(如果需要历届样题的题解可以添加小编企鹅：2815619722(有偿)，可以提供思路以及各种计算或者安装时、运行时的bug,如有侵权联系删除),兄弟们如果有其他关于实时计算的问题 或者实时计算组件问题可以评论询问小编。
2024-01-02 21:04:33
655
原创 全国职业技能大赛高职组(最新职业院校技能大赛_大数据应用开发样题解析-模块C：实时数据处理-任务一：实时数据清洗)
1、使用Flink 消费Kafka 中topic 为ods_mall_data 的数据，根据数据中不同的表将数据分别分发至kafka 的DWD 层的fact_order_master 、 fact_order_detail 的Topic 中（只获取data 的内容，具体的内容格式请自查，其分区数均为2），其他的表则无需处理。过滤出来的order_master的数据如下。
2024-01-02 20:01:54
812
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人