实时处理与流处理

最新推荐文章于 2023-06-27 23:22:49 发布

cdai

最新推荐文章于 2023-06-27 23:22:49 发布

阅读量1.5w

点赞数 5

分类专栏：实时计算

本文链接：https://blog.csdn.net/dc_726/article/details/41143225

版权

本文探讨了实时处理与流式处理的概念。实时处理强调在严格的时间限制内响应，如纳斯达克股票报价系统；而流式处理关注的是数据流连续计算，无硬时间限制，但输出速率需大于或等于输入速率。文章通过举例说明，如Storm和Spark如何支持这两种处理方式。

摘要由CSDN通过智能技术生成

前言：作为一个程序员，总是能不时地听到各种新技术名词，大数据、云计算、实时处理、流式处理、内存计算… 但当我们听到这些时髦的名词时他们到底是在说什么？偶然搜到一个不错的帖子，就总结一下实时处理和流式处理的区别吧。

正文：要说实时处理就得先提一下实时系统(Real-timeSystem)。所谓实时系统就是能在严格的时间限制内响应请求的系统。例如如果某系统能严格保证在10毫秒内处理来自网络的NASDAQ股票报价，那么这个系统就可以算作实时系统，至于系统是通过软件还是硬件或者通过怎样的设计达到的都不限。

虽然看似简单，实际上现实世界中这种系统是很难实现的，尤其是软件实现的实时系统。因为你的进程可能随时被其他进程抢占，CPU调度器无法保证能给你的进程所需的时间和资源来在严格时间限制内完成响应。因此就有了各种实时操作系统内核。现实中实时系统的例子能想到的如军方的导弹控制系统和航天飞机等高精尖的软件系统了。

那实时处理(Real-time Processingor Computing)又是什么？与实时系统类似,但软件工业中似乎对实时二字没有什么明确的定义。例如许多人说实时交易，实际上是因为市场数据瞬息万变，决策经常在毫秒间。一个软实时(Soft Real-time)的例子是Amazon要求所有软件子系统在处理99%的请求时，都能在100-200毫秒内要么给出结果要么立刻失败。