Android 视频编辑解析库MP4Parser

假装你是大灰狼

已于 2023-09-06 16:21:02 修改

阅读量453

点赞数

分类专栏： Android 图像动画文章标签： android AudioRecorder

于 2023-09-06 13:00:40 首次发布

原文链接：https://www.jianshu.com/p/c87ada9b0f65

版权

Android 笔记同时被 2 个专栏收录

196 篇文章 11 订阅

订阅专栏

Android 图像动画

30 篇文章 2 订阅

订阅专栏

01. README

在 GitHub 上找到这个库后从README开始。官方写到A Java API to read, write and create MP4 container. Manipulating containers is different from encoding and decoding videos and audio.大概意思就是：读，写和创建MP4容器，操作容器不同于编码和解码。并不知道什么意思，继续往下。主要功能有：

将音频视频混合到一个mp4文件中
将编码格式相同的录音进行拼接合并
添加或者修改元数据
通过省略帧缩短录音

之后给出了混合音频和视频的操作方式；依赖库中支持的几种格式；一种特殊问题，音视频播放不同步的解决方案；明确强调Different resolutions和Different frame-rates是不能进行拼接合并操作的。

简单小结：使用此库可以实现多个音频视频的追加合并，将视频的音频和视频进行分离替换等，同时还支持了字幕的添加，使用时候需要注意音视频格式。

02. 添加依赖

将源码下载到本地使用Android Studio进行导入，结果这个不是一个Android项目，好尴尬。在README中已经提示项目已经在Maven仓库中，可以使用Gradle添加依赖。在AS中搜索MP4Parser可以看到有四个相关的库。这个在README中也提到version 1.x branch和version 2.x branch。因此两种方式二选一。

// 方式一：合并版
compile 'com.googlecode.mp4parser:isoparser:1.1.21'// 使用
// 方式二：单个版
compile 'org.mp4parser:streaming:1.9.27'
compile 'org.mp4parser:muxer:1.9.27'
compile 'org.mp4parser:isoparser:1.9.27'

03. 工具类及导入的包

import com.coremedia.iso.boxes.Container;
import com.googlecode.mp4parser.FileDataSourceImpl;
import com.googlecode.mp4parser.authoring.Movie;
import com.googlecode.mp4parser.authoring.Track;
import com.googlecode.mp4parser.authoring.builder.DefaultMp4Builder;
import com.googlecode.mp4parser.authoring.container.mp4.MovieCreator;
import com.googlecode.mp4parser.authoring.tracks.AACTrackImpl;
import com.googlecode.mp4parser.authoring.tracks.AppendTrack;
import com.googlecode.mp4parser.authoring.tracks.CroppedTrack;
import com.googlecode.mp4parser.authoring.tracks.TextTrackImpl;

import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.RandomAccessFile;
import java.nio.channels.FileChannel;
import java.util.ArrayList;
import java.util.LinkedList;
import java.util.List;

/**
 * [Mp4Parse]解析库封装工具了
 *
 * @author JustDo23
 */
public class Mp4ParseUtil {
}

04. 对Mp4文件进行追加合并

/**
 * 对Mp4文件集合进行追加合并(按照顺序一个一个拼接起来)
 *
 * @param mp4PathList [输入]Mp4文件路径的集合(支持m4a)(不支持wav)
 * @param outPutPath  [输出]结果文件全部名称包含后缀(比如.mp4)
 * @throws IOException 格式不支持等情况抛出异常
 */
public static void appendMp4List(List<String> mp4PathList, String outPutPath) throws IOException {
    List<Movie> mp4MovieList = new ArrayList<>();// Movie对象集合[输入]
    for (String mp4Path : mp4PathList) {// 将每个文件路径都构建成一个Movie对象
        mp4MovieList.add(MovieCreator.build(mp4Path));
    }

    List<Track> audioTracks = new LinkedList<>();// 音频通道集合
    List<Track> videoTracks = new LinkedList<>();// 视频通道集合

    for (Movie mp4Movie : mp4MovieList) {// 对Movie对象集合进行循环
        for (Track inMovieTrack : mp4Movie.getTracks()) {
            if ("soun".equals(inMovieTrack.getHandler())) {// 从Movie对象中取出音频通道
                audioTracks.add(inMovieTrack);
            }
            if ("vide".equals(inMovieTrack.getHandler())) {// 从Movie对象中取出视频通道
                videoTracks.add(inMovieTrack);
            }
        }
    }

    Movie resultMovie = new Movie();// 结果Movie对象[输出]
    if (!audioTracks.isEmpty()) {// 将所有音频通道追加合并
        resultMovie.addTrack(new AppendTrack(audioTracks.toArray(new Track[audioTracks.size()])));
    }
    if (!videoTracks.isEmpty()) {// 将所有视频通道追加合并
        resultMovie.addTrack(new AppendTrack(videoTracks.toArray(new Track[videoTracks.size()])));
    }

    Container outContainer = new DefaultMp4Builder().build(resultMovie);// 将结果Movie对象封装进容器
    FileChannel fileChannel = new RandomAccessFile(String.format(outPutPath), "rw").getChannel();
    outContainer.writeContainer(fileChannel);// 将容器内容写入磁盘
    fileChannel.close();
}

调用工具来实现功能

/**
 * 执行MP4的追加合成
 */
private void doMp4Append() {
    try {
        List<String> mp4PathList = new ArrayList<>();
        mp4PathList.add(rootPath + "/resource/" + "video1" + ".mp4");
        mp4PathList.add(rootPath + "/resource/" + "video2" + ".mp4");
        String outPutPath = rootPath + "/output/" + "outVideo" + ".mp4";
        Mp4ParseUtil.appendMp4List(mp4PathList, outPutPath);
        LogUtil.e("合并追加完成");
    } catch (IOException e) {
        e.printStackTrace();
        LogUtil.e("异常");
    }
}

05. 对AAC文件集合进行追加合并

/**
 * 对AAC文件集合进行追加合并(按照顺序一个一个拼接起来)
 *
 * @param aacPathList [输入]AAC文件路径的集合(不支持wav)
 * @param outPutPath  [输出]结果文件全部名称包含后缀(比如.aac)
 * @throws IOException 格式不支持等情况抛出异常
 */
public static void appendAacList(List<String> aacPathList, String outPutPath) throws IOException {
    List<Track> audioTracks = new LinkedList<>();// 音频通道集合
    for (int i = 0; i < aacPathList.size(); i++) {// 将每个文件路径都构建成一个AACTrackImpl对象
        audioTracks.add(new AACTrackImpl(new FileDataSourceImpl(aacPathList.get(i))));
    }

    Movie resultMovie = new Movie();// 结果Movie对象[输出]
    if (!audioTracks.isEmpty()) {// 将所有音频通道追加合并
        resultMovie.addTrack(new AppendTrack(audioTracks.toArray(new Track[audioTracks.size()])));
    }

    Container outContainer = new DefaultMp4Builder().build(resultMovie);// 将结果Movie对象封装进容器
    FileChannel fileChannel = new RandomAccessFile(String.format(outPutPath), "rw").getChannel();
    outContainer.writeContainer(fileChannel);// 将容器内容写入磁盘
    fileChannel.close();
}

06. 视频替换音轨

/**
 * 将 AAC 和 MP4 进行混合[替换了视频的音轨]
 *
 * @param aacPath .aac
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static boolean muxAacMp4(String aacPath, String mp4Path, String outPath) {
    try {
        AACTrackImpl aacTrack = new AACTrackImpl(new FileDataSourceImpl(aacPath));
        Movie videoMovie = MovieCreator.build(mp4Path);
        Track videoTracks = null;// 获取视频的单纯视频部分
        for (Track videoMovieTrack : videoMovie.getTracks()) {
            if ("vide".equals(videoMovieTrack.getHandler())) {
                videoTracks = videoMovieTrack;
            }
        }

        Movie resultMovie = new Movie();
        resultMovie.addTrack(videoTracks);// 视频部分
        resultMovie.addTrack(aacTrack);// 音频部分

        Container out = new DefaultMp4Builder().build(resultMovie);
        FileOutputStream fos = new FileOutputStream(new File(outPath));
        out.writeContainer(fos.getChannel());
        fos.close();
    } catch (Exception e) {
        e.printStackTrace();
    }
    return true;
}

/**
 * 将 M4A 和 MP4 进行混合[替换了视频的音轨]
 *
 * @param m4aPath .m4a[同样可以使用.mp4]
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static void muxM4AMp4(String m4aPath, String mp4Path, String outPath) throws IOException {
    Movie audioMovie = MovieCreator.build(m4aPath);
    Track audioTracks = null;// 获取视频的单纯音频部分
    for (Track audioMovieTrack : audioMovie.getTracks()) {
        if ("soun".equals(audioMovieTrack.getHandler())) {
            audioTracks = audioMovieTrack;
        }
    }

    Movie videoMovie = MovieCreator.build(mp4Path);
    Track videoTracks = null;// 获取视频的单纯视频部分
    for (Track videoMovieTrack : videoMovie.getTracks()) {
        if ("vide".equals(videoMovieTrack.getHandler())) {
            videoTracks = videoMovieTrack;
        }
    }

    Movie resultMovie = new Movie();
    resultMovie.addTrack(videoTracks);// 视频部分
    resultMovie.addTrack(audioTracks);// 音频部分

    Container out = new DefaultMp4Builder().build(resultMovie);
    FileOutputStream fos = new FileOutputStream(new File(outPath));
    out.writeContainer(fos.getChannel());
    fos.close();
}

07. 音视频分离

/**
 * 将 Mp4 的音频和视频分离
 *
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static void splitMp4(String mp4Path, String outPath) throws IOException {
    Movie videoMovie = MovieCreator.build(mp4Path);
    Track videoTracks = null;// 获取视频的单纯视频部分
    for (Track videoMovieTrack : videoMovie.getTracks()) {
        if ("vide".equals(videoMovieTrack.getHandler())) {
            videoTracks = videoMovieTrack;
        }
    }

    Movie resultMovie = new Movie();
    resultMovie.addTrack(videoTracks);// 视频部分

    Container out = new DefaultMp4Builder().build(resultMovie);
    FileOutputStream fos = new FileOutputStream(new File(outPath));
    out.writeContainer(fos.getChannel());
    fos.close();
}

08. 添加字幕

/**
 * 对 Mp4 添加字幕
 *
 * @param mp4Path .mp4 添加字幕之前
 * @param outPath .mp4 添加字幕之后
 */
public static void addSubtitles(String mp4Path, String outPath) throws IOException {
    Movie videoMovie = MovieCreator.build(mp4Path);

    TextTrackImpl subTitleEng = new TextTrackImpl();// 实例化文本通道对象
    subTitleEng.getTrackMetaData().setLanguage("eng");// 设置元数据(语言)

    subTitleEng.getSubs().add(new TextTrackImpl.Line(0, 1000, "Five"));// 参数时间毫秒值
    subTitleEng.getSubs().add(new TextTrackImpl.Line(1000, 2000, "Four"));
    subTitleEng.getSubs().add(new TextTrackImpl.Line(2000, 3000, "Three"));
    subTitleEng.getSubs().add(new TextTrackImpl.Line(3000, 4000, "Two"));
    subTitleEng.getSubs().add(new TextTrackImpl.Line(4000, 5000, "one"));
    subTitleEng.getSubs().add(new TextTrackImpl.Line(5001, 5002, " "));// 省略去测试
    videoMovie.addTrack(subTitleEng);// 将字幕通道添加进视频Movie对象中

    Container out = new DefaultMp4Builder().build(videoMovie);
    FileOutputStream fos = new FileOutputStream(new File(outPath));
    out.writeContainer(fos.getChannel());
    fos.close();
}

这个是添加字幕的简单使用，测试中发现，字幕中传入的参数其实就是时间毫秒值，在5000之后的部分一直显示one，所以在之后就添加了空格。还有一个问题就是添加的第一个字幕总是显示不出来。

09. MP4的切割

/**
 * 将 MP4 切割
 *
 * @param mp4Path    .mp4
 * @param fromSample 起始位置
 * @param toSample   结束位置
 * @param outPath    .mp4
 */
public static void cropMp4(String mp4Path, long fromSample, long toSample, String outPath) throws IOException {
    Movie mp4Movie = MovieCreator.build(mp4Path);
    Track videoTracks = null;// 获取视频的单纯视频部分
    for (Track videoMovieTrack : mp4Movie.getTracks()) {
        if ("vide".equals(videoMovieTrack.getHandler())) {
            videoTracks = videoMovieTrack;
        }
    }
    Track audioTracks = null;// 获取视频的单纯音频部分
    for (Track audioMovieTrack : mp4Movie.getTracks()) {
        if ("soun".equals(audioMovieTrack.getHandler())) {
            audioTracks = audioMovieTrack;
        }
    }

    Movie resultMovie = new Movie();
    resultMovie.addTrack(new AppendTrack(new CroppedTrack(videoTracks, fromSample, toSample)));// 视频部分
    resultMovie.addTrack(new AppendTrack(new CroppedTrack(audioTracks, fromSample, toSample)));// 音频部分

    Container out = new DefaultMp4Builder().build(resultMovie);
    FileOutputStream fos = new FileOutputStream(new File(outPath));
    out.writeContainer(fos.getChannel());
    fos.close();
}

参数列表中的起始位置和结束位置并不是时间毫秒值。点击CroppedTrack查看源码注释并没有理解这两个参数的具体含义，根据语境貌似是在说起始和结束的帧。

10. 小结

之前写的时候都是一个个方法，今天重新整理给搞成一个工具类进行封装。源码项目中有一个examples的模块，其中有大量的demo可以查看，当下记录的方法还是比较浅显的，其他更多没有研究到，这个东西有难啃呀。其他格式没有涉及，好的格式是不支持的。相关资料并没有找到很多，自己使用的基本记录在此，以后看情况更新。

假装你是大灰狼

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
Android 视频编辑解析库MP4Parser

在 GitHub 上找到这个库后从README开始。官方写到大概意思就是：读，写和创建MP4容器，操作容器不同于编码和解码。并不知道什么意思，继续往下。之后给出了混合音频和视频的操作方式；依赖库中支持的几种格式；一种特殊问题，音视频播放不同步的解决方案；明确强调和是不能进行拼接合并操作的。简单小结：使用此库可以实现多个音频视频的追加合并，将视频的音频和视频进行分离替换等，同时还支持了字幕的添加，使用时候需要注意音视频格式。
复制链接

扫一扫