一、音视频基础

1.  音视频录制原理:

音视频录制原理

• 音视频采集：

  • 视频采集：通过摄像头等硬件设备捕捉图像帧，每秒钟捕捉的图像帧数称为帧率。
  • 音频采集：通过麦克风等设备捕捉声音信号，每秒钟捕捉的采样点数量称为采样率。

• 音视频处理：

  • 图像处理：对采集到的图像帧进行曝光、色度、温和度、色差等处理。
  • 音频处理：对采集到的音频帧进行变声、混响、噪声处理等。

• 音视频编码：

  • 视频编码：将处理后的图像帧进行压缩编码，常见的编码格式有H.264、H.265等。
  • 音频编码：将处理后的音频帧进行压缩编码，常见的编码格式有MP3、AAC等。

• 音视频封装：

  • 将编码后的音视频数据封装成文件，如MP4、MOV等。

• 音视频同步：

  • 在采集数据时，给每一帧加上时间戳，确保音视频数据的同步。

关键技术点

• 采样率：影响声音的还原度和清晰度，常见的采样率有44.1kHz、48kHz等。
• 帧率：影响视频的流畅度，常见的帧率有24fps、30fps等。
• 编码格式：决定了文件的压缩效率和播放兼容性，如H.264、H.265用于视频编码，MP3、AAC用于音频编码。

2. 音视频播放原理 

音视频播放原理主要涉及解协议、解封装、解码、音视频同步、播放等关键步骤。以下是详细的解释：

音视频播放原理
解协议：对于在线播放，这一步骤涉及将流媒体协议的数据解析为标准的封装格式数据。
解封装：将封装格式的数据分离成音频流压缩编码数据和视频流压缩编码数据。
解码：将压缩编码的音视频数据解码成非压缩的音视频原始数据。
音视频同步：根据时间戳等信息同步解码出来的视频和音频数据。
播放：将处理后的音视频数据送至系统的显卡和声卡进行播放。

3. 图像表示

 

 

 

 

 

 

 

4. 视频主要概念

 

 5. 音频