音视频处理入门基础

       有一次老大给我分配个任务，你给我们做个流媒体服务器，将YUV和PCM编码h264和aac，然后复用成一个合适的格式通过服务器转发过去……，说完之后，我发现我根本就听不懂他在说什么？然后再细讲了之后，我还是没弄明白。当时我对视频处理的唯一认识就是——视频是由一张一张图片连续播放形成的。就我这水平，也敢叫我做这个？反正老板让我干，我也只有干了。然后就去各种查阅书籍和网站、博客，最后自己用时5个多月，使用Live555和ffmpeg弄出了一套，真是难。在此期间，要是有人带我入门，我想还能快很多，当时是连们都找不到呀，虽然现在也不弄视频处理了，但还是把期间的感悟记下来，希望能帮助和我一样的小白。我只自学了半年音视频处理，应该还有很多不对的地方，我只是说出我的理解，水平有限，希望大家谅解。

        我们先来说音视频是如何制作出来的，首先我们会采集原始的音频数据，然后将音频数据编码成音频流，采集视频原始数据（就是一张张序列图片），然后将视频数据编码成视频流，然后将音频流和视频流复用成一个音视频格式（其实就是按照某种方式将他们放在一起），如flv，mp4，rmvb，avi，ts等，过程大体就是这样的。