Media Foundation: IMFSourceReader capture video and audio to MP4 file
枚举设备
- 调用MFCreateAttributes创建属性对象, 调用枚举设备函数时需要。
- 调用IMFAttributes::SetGUID设置需要枚举设备的类型(MF_DEVSOURCE_ATTRIBUTE_SOURCE_TYPE), 设置属性值为MF_DEVSOURCE_ATTRIBUTE_SOURCE_TYPE_VIDCAP_GUID(Video Capture Device)或者MF_DEVSOURCE_ATTRIBUTE_SOURCE_TYPE_AUDCAP_GUID(Audio Capture Device)。
- 调用MFEnumDeviceSources, 获取IMFActivate指针对象数组指针,每一个IMFActivate代表一个视频或者音频捕获设备。
创建IMFMediaSource
调用IMFActivate::ActivateObject获取IMFMediaSource。
创建IMFSourceReader
1.调用MFCreateSourceReaderFromMediaSource创建IMFSourceReader.
2.调用IMFSourceReader::SetStreamSelection选择打开的流(Capture device可能有三种流:Preview、Video、Still).
3.调用IMFSourceReader::SetCurrentMediaType设置MediaType(视频流包括:MF_MT_AVG_BITRATE、MF_MT_FRAME_SIZE、MF_MT_FRAME_RATE、MF_MT_INTERLACE_MODE、MF_MT_SUBTYPE等等,音频流包括:MF_MT_AUDIO_NUM_CHANNELS、MF_MT_AUDIO_SAMPLES_PER_SECOND、MF_MT_AUDIO_AVG_BYTES_PER_SECOND、MF_MT_AUDIO_BITS_PER_SAMPLE、MF_MT_AUDIO_BLOCK_ALIGNMENT等等)。
创建IMFSinkWriter
1.调用MFCreateSinkWriterFromURL创建IMFSinkWriter。
2.调用IMFSinkWriter::AddStream添加视频流和音频流类型,同时会得到对应的流ID,这里设置的MediaType是输出的MediaType。
3.调用IMFSinkWriter::SetInputMediaType设置输入的流MediaType。
4.调用IMFSinkWriter::BeginWriting使Sink Writer创建对应输入输出流类型的Encoder和Media Sink。
获取Video/Audio Samples
1.调用IMFSourceReader::ReadSample获取流的Video或Audio Samples.
写入Video/Audio Sample
1.调用IMFSinkWriter::WriteSample将IMFSourceReader获取到的Samples写入到Sink Writer.
2.最后调用IMFSinkWriter::Finalize终止写入,这时MP4文件将会生成。
Samples for capture video and audio
MFCaptureToFile: 该示例仅仅是在Microsoft sample基础上添加了Audio capture.
这个例子更好,把Audio&Video media source合并为一个,然后再创建合并后的SourceReader
参考资料
[1] Media Foundation Sink Writer
[2] Microsoft sample MFCaptureToFile