基于WebRTC的流式系统揭秘

拉达曼迪斯II

于 2024-09-30 00:00:00 发布

阅读量821

点赞数 18

分类专栏： Unigine引擎深入研究 C/C++/CLI WebRTC 文章标签： webrtc 人工智能 WebGPU WebGL gpt

本文链接：https://blog.csdn.net/ms44/article/details/142635284

版权

Unigine引擎深入研究同时被 3 个专栏收录

34 篇文章 2 订阅

订阅专栏

C/C++/CLI

19 篇文章 0 订阅

订阅专栏

WebRTC

3 篇文章 0 订阅

订阅专栏

序言

最近几年远程办公开始涌现之际，越来越多的应用在云端进行支持，从性能表现和画质表现来看，基于WebRTC开源框架的流式系统开始主流，用户数，开发人员，产品数量大幅上升。本文基于这种业界现状，向大家阐述各个方面的技术细节和内容，希望能给到大家一些产品研发过程中的心得和技术要点。

本文作者

董锋

作者简介

火晓青

作者简介

火晓青, 伊鲁生科技有限公司联合创始人

软件研发从业20多年,曾任职于恺英，游族，菲动多家上市公司，头部金融科技公司，历任架构师、平台研发负责人和技术总监。持续关注互联网技术、数据挖掘，及移动互联网技术实践。先后负责社交网络，微博，移动网络，社会化搜索等项目积累实战经验，从事大数据架构和应用，分布式框架，实时系统，数据统计分析，热衷于挖掘数据价值并将数据价值转化为企业价值。主导并参与青仓流式远程桌面软件等。

总览

什么是流式系统

流式这种叫法应该是从英文的说法上翻译过来的。英文原来的单词是Streaming . 一般有Video Streaming , Audio Streaming , 中文就是视频流，音频流，我们一般也称为流媒体。

当然实质上也被称为云系统，比如采用WebRTC同等架构的Google的云游戏平台Stadia，还有腾讯的云游戏平台，其实都是基于WebRTC或者同等架构或作用的产品，同时由于运行在公有云上，因此被称为云系统，流式系统，或者串流系统等各种叫法。

总体来看，流式系统可以开发成远程音视频平台，远程控制软件，云渲染服务等。

流式系统可以有很多技术实现方式，它的主要核心是使用视频流，将内容在服务器端以视频流的方式传递到前端，前端解码视频流进行内容显示和操作的一种系统。由于在这个领域WebRTC是使用最为广泛的一种开源框架，因此本文就详细介绍以WebRTC为主的流式系统的详细产品内容和技术实现细节。

效果图：

主要特性：

跨平台支持，支持Windows,Mac,Linux (Debian), Android, iPhone (Cross-platform supported)
无插件安装及运行 (web browser only, no plug installed)
多浏览器支持，支持Google Chrome , Firefox , Apple safari 等主流浏览器 (Multiple web browser supported)
一键部署配置。满足C/S应用快速部署到B/S模式 (One click deployment)
配置方式丰富，支持私有、公有云。可局域网，广域网部署。(Private /Public cloud system supported)
传送的数据经过协议加密，且支持端到端加密方式。 (Secure protocol and data layer supported)
支持将重度的三维应用，数字孪生等应用快速移植到Web平台 (Fast heavy native 3D application migration)
内置VP8,VP9,H264等编码方式，且支持GPU CUDA硬件加速 (Hardware acceleration)
支持额外自定义的数据通道用于传输数据 (Customized data channel transfer)
支持1对1 , 1对多，多对多客户端服务器方案 ( 1 to 1, 1 to multiple, multiple to multiple solution supported)
提供了额外参数和REST API等进行二次开发支持 (REST API interface)
支持VDI方案 (VDI support)
支持多屏幕方案 (Multiple screens )