GStreamer Basic tutorial 学习笔记（十六）

最新推荐文章于 2024-09-05 17:47:51 发布

清墨韵染

最新推荐文章于 2024-09-05 17:47:51 发布

阅读量601

点赞数 1

分类专栏： GStreamer学习笔记文章标签： GStreamer 服务器 webrtc c++

原文链接：https://gstreamer.freedesktop.org/documentation/tutorials/basic/platform-specific-elements.html?gi-language=c

版权

GStreamer学习笔记专栏收录该内容

24 篇文章 5 订阅

订阅专栏

GStreamer虽然跨平台，但某些元素如视频输出和音频输出依赖于底层系统。glimagesink是多数平台推荐的视频输出，而ximagesink和xvimagesink适用于Linux。在Windows上，d3d11videosink是首选，而Android和iOS则有特定的音频和视频输出元素。了解这些特殊性对于手动配置GStreamer元素至关重要。

摘要由CSDN通过智能技术生成

1. 特定平台的元素

1.1 目标

尽管GStreamer是一个跨平台的框架，但并非所有元素都适用于所有平台。例如，视频输出依赖于底层窗口系统，因此需要根据平台选择不同的视频输出。当使用像playbin或autovideosink这样的元素时，通常不需要担心这个问题，但是在需要使用仅适用于特定平台的输出元素时，本教程会向您介绍一些它们的特殊性。

1.2 跨平台

1.2.1 glimagesink

该视频输出元素基于OpenGL或OpenGL ES。它支持对缩放图像进行重采样和滤波以减轻混叠效应。它实现了VideoOverlay接口，因此视频窗口可以重新定位（嵌入到其他窗口中）。这是大多数平台上推荐的视频输出元素，除了Windows平台（在Windows上推荐使用d3d11videosink）。特别是在Android和iOS上，它是唯一可用的视频输出元素。它可以通过glupload！glcolorconvert！glimagesinkelement进行分解，以在流水线中插入进一步的OpenGL硬件加速处理。

1.3 Linux

1.3.1 ximagesink

基于X Window的标准RGB视频输出。它实现了VideoOverlay接口，因此视频窗口可以重新定位（嵌入到其他窗口中）。它不支持除RGB以外的其他缩放或颜色格式；可以使用其他方法来执行这些操作（例如使用videoscale元素）。

1.3.2 xvimagesink

基于X Window的视频输出，使用X Video Extension（Xv）。它实现了VideoOverlay接口，因此视频窗口可以重新定位（嵌入到其他窗口中）。它可以在GPU上高效地进行缩放。只有在硬件和对应的驱动程序支持Xv扩展时才可用。

1.3.3 alsasink

该音频输出通过ALSA（Advanced Linux Sound Architecture）输出到声卡。这个输出在几乎所有Linux平台上都可用。它通常被视为与声卡交互的“低级”接口，并且可能配置复杂（参见《Playback tutorial 9: Digital audio pass-through》中的注释）。

1.3.4 pulsesink

该输出将音频播放到PulseAudio服务器。它比ALSA更高级的抽象层次接口，因此更容易使用并提供更高级的功能。但是，已知在一些较旧的Linux发行版上不稳定。

1.4 Mac OS X

1.4.1 osxvideosink

这是在Mac OS X上可用的视频输出元素。也可以使用OpenGL使用glimagesink进行绘制。

1.4.2 osxaudiosink

这是在Mac OS X上唯一可用的音频输出元素。

1.5 Windows

1.5.1 d3d11videosink

该视频输出元素基于Direct3D11，是Windows平台上推荐的元素。它支持VideoOverlay接口，并以零拷贝方式进行缩放和颜色空间转换。该元素是Windows平台上性能最好、功能最丰富的视频输出元素。

1.5.2 d3dvideosink

该视频输出元素基于Direct3D9。它支持对缩放图像进行重采样和滤波以减轻混叠效应。它实现了VideoOverlay接口，因此视频窗口可以重新定位（嵌入到其他窗口中）。不推荐在针对Windows 8或更高版本的应用程序中使用此元素。

1.5.3 dshowvideosink（已弃用）

该视频输出元素基于Direct Show。它可以使用不同的渲染后端，如EVR、VMR9或VMR7，其中EVR仅适用于Windows Vista或更高版本。它支持对缩放图像进行重采样和滤波以减轻混叠效应。它实现了VideoOverlay接口，因此视频窗口可以重新定位（嵌入到其他窗口中）。在大多数情况下，不推荐使用此元素。

1.5.4 wasapisink和wasapi2sink

这些元素是Windows上默认的音频输出元素，基于WASAPI，可在Vista或更高版本中使用。请注意，wasapi2sink是wasapisink的替代品，并且在Windows 8或更高版本上是默认的音频输出元素。否则，wasapisink将是默认的音频输出元素。

1.5.5 directsoundsink（已弃用）

该音频输出元素基于DirectSound，在所有Windows版本中都可用。

1.5.6 dshowdecwrapper

Direct Show是一种类似于GStreamer的多媒体框架。它们之间有足够的差异，无法将它们的流水线相互连接。但是，通过该元素，GStreamer可以从Direct Show中的解码器中获益。dshowdecwrapper将多个Direct Show解码器封装起来，以便将其嵌入到GStreamer流水线中。使用gst-inspect-1.0工具（参见《Basic tutorial 10: GStreamer tools》）查看可用的解码器。

1.6 Android

1.6.1 openslessink

这是在Android上GStreamer可用的唯一音频输出元素。它基于OpenSL ES。

1.6.2 openslessrc

这是在Android上GStreamer可用的唯一音频源元素。它基于OpenSL ES。

1.6.3 androidmedia

android.media.MediaCodec是一个特定于Android的API，可访问设备上可用的编解码器，包括硬件编解码器。它从API级别16（JellyBean）开始提供，并且GStreamer可以通过androidmedia插件来使用它进行音频和视频解码。在Android上，将硬件解码器连接到glimagesink元素可以产生高性能的零拷贝decodebin流水线。