Webcodecs 遇到的一些坑

最新推荐文章于 2024-05-27 09:48:39 发布

程龙-音视频

最新推荐文章于 2024-05-27 09:48:39 发布

阅读量1.4k

点赞数

分类专栏： webassembly 文章标签： java 开发语言 js

本文链接：https://blog.csdn.net/c553110519/article/details/129451016

版权

在开发web端音视频剪辑软件过程中，使用Webcodecs遇到三个主要问题：1) 通过C++调用Decoder时，输出帧回调延迟；2) 解码一段时间后，output回调停止；3) 导出视频首帧出现绿屏。解决方案包括主线程转发、子线程监听共享内存以及等待异步拷贝完成。问题的解决涉及到对JS异步处理和资源管理的理解。

摘要由CSDN通过智能技术生成

Webcodecs 遇到的一些坑

背景：

由于需要在web端做一款音视频剪辑软件，目前已经做到了软变软解，准备介入硬件webcodec解码的时候，遇到了一些问题，现在把问题整理如下。

问题一：通过c++调用Decoder，输出帧回调一直没有回调

C++
EM_JS(int, DecodePutBuffer, (int key_flag, int timestamp, int duration, void *pData, int nDataSize), {
    let buffer =   new Uint8Array(Module.HEAPU8.buffer, pData, nDataSize);
    let key_string=null;
    if (key_flag)
    {
        key_string = "key";
    }
    else
    {
        key_string = "delta";
    }
    let chunk = new EncodedVideoChunk({
   type: key_string,
    timestamp: timestamp,
    duration: duration,
    data: buffer
    });
    Module.decoder.decode(chunk);

});