大咖们都是怎么阅读音视频源码的（内含WebRTC、X264、FFmpeg、ijkplayer、jsmpeg、Live555、Opus源码解读）

前言

在后疫情时代，多媒体技术的蓬勃发展快速推动着全社会往视频化时代演进。以FFmpeg/Gstreamer/WebRTC/SRS/VLC player/X264为代表的一系列优秀的音视频开源项目构建起整个音视频高楼大厦的基石。开源技术从未止步， FFmpeg 5.0， WebRTC-NV，SRS 4.0， VLC 3.0.16 新版本持续发布，也推动着音视频行业从短视频到在线视频会议，从VR/AR到全息视频和元宇宙的不断创新。

这里给大家推荐阿里云团队整理的一份音视频源码解读，相信可以给大家提供一些帮助，有需要的朋友们也可以领取一下随时查漏补缺。

第一章 WebRTC Native 源码导读

• 安卓相机采集实现分析
• 安卓预览实现分析
• 安卓视频硬编码实现分析
• VideoCRE 与内存抖动优化
• 安卓 P2P 连接过程和 DataChannel 使用
• 视频数据 native 层之旅
• 混音
• P2P 连接过程完全解析
• API 概览
• RTP H.264 封包与解包

第二章 X264源码解读

• 概述
• x264命令行工具
• 编码器主干部分-2
• x264_slice_write()
• 滤波（Filter）部分
• 宏块分析（Analysis）部分-帧内宏块（Intra）

第三章 FFmpeg

• FFmpeg 编译和集成
• FFmpeg + ANativeWindow 实现视频解码播放
• FFmpeg + OpenSLES 实现音频解码播放
• FFmpeg + OpenGLES 实现音频可视化播放
• FFmpeg + OpenGLES 实现视频解码播放和视频滤镜
• FFmpeg 播放器实现音视频同步的三种方式
• FFmpeg + OpenGLES 实现 3D 全景播放器
• FFmpeg 播放器视频渲染优化
• FFmpeg、x264以及fdk-aac 编译整合
• FFmpeg 视频录制 - 视频添加滤镜和编码
• FFmpeg + Android AudioRecorder 音频录制编码
• Android FFmpeg 实现带滤镜的微信小视频录制功能

第四章 ijkplayer 源码分析系列

• 整体结构总结
• read_thread流程
• 解码流程
• 渲染流程

第五章 jsmpeg源码解析

• 基础知识 字符处理 ArrayBuffer TypedArray
• TS码流 PAT PMT
• 源码buffer.js对Uint8Array的封装
• 源码ts.js TS格式解析流程
• 源码mpeg1.js MPEG1码流结构
• 概要总结

第六章 Live555源码解析

• GROUPSOCK
• MEDIUM媒体基础类
• MEDIASOURCE、MEDIASINK、MEDIASESSION、MEDIASUBSESSION
• FRAMEDSOURCE、RTPSOURCE、RTPSINK
• GENERICMEDIASERVER、RTSPSERVER、RTSPCLIENT
• testRTSPClient
• ServerMediaSession、ServerMediaSubsession、live555MediaServer

第七章 Opus源码解析

• 简介
• 编解码器使用
• 手撸一个Opus编码程序
• Opus解码程序实现
• OggOpus封装器全解析
• Opus编码基础之认识声音
• Opus编码基础之压缩编码

由于篇幅限制，这里只能展示部分内容，朋友们如果需要这份完整版的PDF资料合集，微信扫码文末CSDN官方二维码【免费获取】。

## 结语 随着音视频领域技术的突破，类似《头号玩家》电影里的场景很可能成为现实，而越来越多的传统场景均有可能被颠覆。当虚拟音画如同身临其境，会对我们的生活产生什么样的影响？又会催生哪些新需求和新产业？我们无法预估距离实现全真互联有多远，但它已然带来了新话题和新风口，让人们对科幻场景画面的实现充满期待。