基于云服务创建实时运营数据分析服务(二)

基于云服务创建实时运营数据分析服务

实时运营数据分析
  • 使用数据计算服务、流数据总线、流计算产品,可对实时业务数据进行归档和分析,实现秒级响应,对接数据大屏或BI报表产品即刻呈现业务状态。

在这里插入图片描述

使用京东云的流数据总线、流计算以及数据大屏,对于其他云平台可做参考。

流数据总线是面向大数据场景下可扩展、分布式、高吞吐量的消息服务,提供低延迟的消息发布及订阅功能,帮助用户快速构建流式数据的分析和应用。

流计算是大数据场景下的实时数据处理与分析平台,支持用户以 SQL 方式编写数据处理作业, 降低流式数据开发门槛,帮助用户快速构建流处理应用。

京东云数据大屏是一款基于实时多层渲染技术的数据可视化工具,它能够提供对海量数据进行实时场景化展示,同时还提供数据分层展示功能,用户可以通过钻取、缩放等交互方式全面的掌握数据。

创建“流计算”应用,进行数据输入和输出,使用作业开发

1.登录“流计算”控制台,进入流计算的“应用管理”页面,创建应用。
在这里插入图片描述

2.点击“创建应用”创建应用。选择地域为华北-北京,输入应用名称“lab_rtd01”,其他根据业务需求选择或者为默认。
在这里插入图片描述

3.点击确认“lab_rtd01”应用创建完成。
在这里插入图片描述

4.在应用列表页,点击已创建的应用名称“lab_rtd01”后,进入到作业开发页面。

在这里插入图片描述
5.点击“创建”后进入输入源定义页面。按照要求填写“名称”为“lab_rtdin01”,选择已经创建好的“源类型”、“流式数据”、“主题”。按照需求配置“Batch Interval”。“消息识别模式”这里选择JSON来演示。

在这里插入图片描述
6.接下来配置JSON格式的“消息样例”,“字段设置方式”可以选择手动或自动。字段设置的数据类型需要手动选择。“{“province_id”:“1”,“province_name”:“北京”,“province_code”:“110000”,“province_sale”:“10003”}”

在这里插入图片描述
7.点击确认完成输入设置,控制台弹出“添加成功”。
在这里插入图片描述

8.选择返回作业开发页面,可以查看创建的“lab_rtdin01”。点击左侧“输出”,进入到输出模块。

在这里插入图片描述
在这里插入图片描述

9.点击“创建”后进入输出位置定义页面。按照要求填写“名称”为“lab_rtdout01”,选择已经创建好的“输出位置”、“数据库”、“数据表”。这里演示选择“忽略异常数据处理,不保存”。
在这里插入图片描述

10.点击确认完成输出设置,控制台弹出“保存成功”。

在这里插入图片描述
11.在作业开发页面,点击左侧“查询”,进入到查询模块。

在这里插入图片描述
12.点击“创建”后进入查询定义页面。填写查询“名称”为“lab_rtdout01”,按照项目需求选择分配资源。

在这里插入图片描述
13.点击确认完成查询创建,控制台弹出“操作成功”。

在这里插入图片描述
14.完成查询创建后,会跳转作业开发设置界面,也可以手动点击查询名称进入。在开发方式下面写入“insert into table lab_rtdout01 select province_code,province_name,province_sale from lab_rtdin01; ”。
在这里插入图片描述

15.点击“保存”作业开发设在后,自动返回查询模块页面。“状态”默认显示已停用。
在这里插入图片描述

16.点击“启用”开启作业开发任务,显示正在提交,等待开启。“状态”为启用时,表示成功。

在这里插入图片描述
在这里插入图片描述

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值