Android 视频编辑解析库MP4Parser

引言：音视频领域的小白，一不小心遇到很牛叉的需求。各种渠道看到这个库，研究的不够深，简单记录。

时间：2017年03月14日22:52:44

作者：JustDo23

GitHub：MP4Parser

01. README

在 GitHub 上找到这个库后从README开始。官方写到A Java API to read, write and create MP4 container. Manipulating containers is different from encoding and decoding videos and audio.大概意思就是：读，写和创建MP4容器，操作容器不同于编码和解码。并不知道什么意思，继续往下。主要功能有：

将音频视频混合到一个mp4文件中
将编码格式相同的录音进行拼接合并
添加或者修改元数据
通过省略帧缩短录音

之后给出了混合音频和视频的操作方式；依赖库中支持的几种格式；一种特殊问题，音视频播放不同步的解决方案；明确强调Different resolutions和Different frame-rates是不能进行拼接合并操作的。

简单小结：使用此库可以实现多个音频视频的追加合并，将视频的音频和视频进行分离替换等，同时还支持了字幕的添加，使用时候需要注意音视频格式。

02. 添加依赖

将源码下载到本地使用Android Studio进行导入，结果这个不是一个Android项目，好尴尬。在README中已经提示项目已经在Maven仓库中，可以使用Gradle添加依赖。在AS中搜索MP4Parser可以看到有四个相关的库。这个在README中也提到version 1.x branch和version 2.x branch。因此两种方式二选一。

// 方式一：合并版
compile 'com.googlecode.mp4parser:isoparser:1.1.21'// 使用
// 方式二：单个版
compile 'org.mp4parser:streaming:1.9.27'
compile 'org.mp4parser:muxer:1.9.27'
compile 'org.mp4parser:isoparser:1.9.27'

03. 工具类及导入的包

import com.coremedia.iso.boxes.Container;
import com.googlecode.mp4parser.FileDataSourceImpl;
import com.googlecode.mp4parser.authoring.Movie;
import com.googlecode.mp4parser.authoring.Track;
import com.googlecode.mp4parser.authoring.builder.DefaultMp4Builder;
import com.googlecode.mp4parser.authoring.container.mp4.MovieCreator;
import com.googlecode.mp4parser.authoring.tracks.AACTrackImpl;
import com.googlecode.mp4parser.authoring.tracks.AppendTrack;
import com.googlecode.mp4parser.authoring.tracks.CroppedTrack;
import com.googlecode.mp4parser.authoring.tracks.TextTrackImpl;

import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.RandomAccessFile;
import java.nio.channels.FileChannel;
import java.util.ArrayList;
import java.util.LinkedList;
import java.util.List;

/**
 * [Mp4Parse]解析库封装工具了
 *
 * @author JustDo23
 */
public class Mp4ParseUtil {
}

04. 对Mp4文件进行追加合并

  /**
   * 对Mp4文件集合进行追加合并(按照顺序一个一个拼接起来)
   *
   * @param mp4PathList [输入]Mp4文件路径的集合(支持m4a)(不支持wav)
   * @param outPutPath  [输出]结果文件全部名称包含后缀(比如.mp4)
   * @throws IOException 格式不支持等情况抛出异常
   */
  public static void appendMp4List(List<String> mp4PathList, String outPutPath) throws IOException {
    List<Movie> mp4MovieList = new ArrayList<>();// Movie对象集合[输入]
    for (String mp4Path : mp4PathList) {// 将每个文件路径都构建成一个Movie对象
      mp4MovieList.add(MovieCreator.build(mp4Path));
    }

    List<Track> audioTracks = new LinkedList<>();// 音频通道集合
    List<Track> videoTracks = new LinkedList<>();// 视频通道集合

    for (Movie mp4Movie : mp4MovieList) {// 对Movie对象集合进行循环
      for (Track inMovieTrack : mp4Movie.getTracks()) {
        if ("soun".equals(inMovieTrack.getHandler())) {// 从Movie对象中取出音频通道
          audioTracks.add(inMovieTrack);
        }
        if ("vide".equals(inMovieTrack.getHandler())) {// 从Movie对象中取出视频通道
          videoTracks.add(inMovieTrack);
        }
      }
    }

    Movie resultMovie = new Movie();// 结果Movie对象[输出]
    if (!audioTracks.isEmpty()) {// 将所有音频通道追加合并
      resultMovie.addTrack(new AppendTrack(audioTracks.toArray(new Track[audioTracks.size()])));
    }
    if (!videoTracks.isEmpty()) {// 将所有视频通道追加合并
      resultMovie.addTrack(new AppendTrack(videoTracks.toArray(new Track[videoTracks.size()])));
    }

    Container outContainer = new DefaultMp4Builder().build(resultMovie);// 将结果Movie对象封装进容器
    FileChannel fileChannel = new RandomAccessFile(String.format(outPutPath), "rw").getChannel();
    outContainer.writeContainer(fileChannel);// 将容器内容写入磁盘
    fileChannel.close();
  }

调用工具来实现功能

/**
 * 执行MP4的追加合成
 */
private void doMp4Append() {
  try {
    List<String> mp4PathList = new ArrayList<>();
    mp4PathList.add(rootPath + "/resource/" + "video1" + ".mp4");
    mp4PathList.add(rootPath + "/resource/" + "video2" + ".mp4");
    String outPutPath = rootPath + "/output/" + "outVideo" + ".mp4";
    Mp4ParseUtil.appendMp4List(mp4PathList, outPutPath);
    LogUtil.e("合并追加完成");
  } catch (IOException e) {
    e.printStackTrace();
    LogUtil.e("异常");
  }
}

05. 对AAC文件集合进行追加合并

/**
 * 对AAC文件集合进行追加合并(按照顺序一个一个拼接起来)
 *
 * @param aacPathList [输入]AAC文件路径的集合(不支持wav)
 * @param outPutPath  [输出]结果文件全部名称包含后缀(比如.aac)
 * @throws IOException 格式不支持等情况抛出异常
 */
public static void appendAacList(List<String> aacPathList, String outPutPath) throws IOException {
  List<Track> audioTracks = new LinkedList<>();// 音频通道集合
  for (int i = 0; i < aacPathList.size(); i++) {// 将每个文件路径都构建成一个AACTrackImpl对象
    audioTracks.add(new AACTrackImpl(new FileDataSourceImpl(aacPathList.get(i))));
  }

  Movie resultMovie = new Movie();// 结果Movie对象[输出]
  if (!audioTracks.isEmpty()) {// 将所有音频通道追加合并
    resultMovie.addTrack(new AppendTrack(audioTracks.toArray(new Track[audioTracks.size()])));
  }

  Container outContainer = new DefaultMp4Builder().build(resultMovie);// 将结果Movie对象封装进容器
  FileChannel fileChannel = new RandomAccessFile(String.format(outPutPath), "rw").getChannel();
  outContainer.writeContainer(fileChannel);// 将容器内容写入磁盘
  fileChannel.close();
}

06. 视频替换音轨

/**
 * 将 AAC 和 MP4 进行混合[替换了视频的音轨]
 *
 * @param aacPath .aac
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static boolean muxAacMp4(String aacPath, String mp4Path, String outPath) {
  try {
    AACTrackImpl aacTrack = new AACTrackImpl(new FileDataSourceImpl(aacPath));
    Movie videoMovie = MovieCreator.build(mp4Path);
    Track videoTracks = null;// 获取视频的单纯视频部分
    for (Track videoMovieTrack : videoMovie.getTracks()) {
      if ("vide".equals(videoMovieTrack.getHandler())) {
        videoTracks = videoMovieTrack;
      }
    }

    Movie resultMovie = new Movie();
    resultMovie.addTrack(videoTracks);// 视频部分
    resultMovie.addTrack(aacTrack);// 音频部分

    Container out = new DefaultMp4Builder().build(resultMovie);
    FileOutputStream fos = new FileOutputStream(new File(outPath));
    out.writeContainer(fos.getChannel());
    fos.close();
  } catch (Exception e) {
    e.printStackTrace();
  }
  return true;
}

/**
 * 将 M4A 和 MP4 进行混合[替换了视频的音轨]
 *
 * @param m4aPath .m4a[同样可以使用.mp4]
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static void muxM4AMp4(String m4aPath, String mp4Path, String outPath) throws IOException {
  Movie audioMovie = MovieCreator.build(m4aPath);
  Track audioTracks = null;// 获取视频的单纯音频部分
  for (Track audioMovieTrack : audioMovie.getTracks()) {
    if ("soun".equals(audioMovieTrack.getHandler())) {
      audioTracks = audioMovieTrack;
    }
  }

  Movie videoMovie = MovieCreator.build(mp4Path);
  Track videoTracks = null;// 获取视频的单纯视频部分
  for (Track videoMovieTrack : videoMovie.getTracks()) {
    if ("vide".equals(videoMovieTrack.getHandler())) {
      videoTracks = videoMovieTrack;
    }
  }

  Movie resultMovie = new Movie();
  resultMovie.addTrack(videoTracks);// 视频部分
  resultMovie.addTrack(audioTracks);// 音频部分

  Container out = new DefaultMp4Builder().build(resultMovie);
  FileOutputStream fos = new FileOutputStream(new File(outPath));
  out.writeContainer(fos.getChannel());
  fos.close();
}

07. 音视频分离

/**
 * 将 Mp4 的音频和视频分离
 *
 * @param mp4Path .mp4
 * @param outPath .mp4
 */
public static void splitMp4(String mp4Path, String outPath) throws IOException {
  Movie videoMovie = MovieCreator.build(mp4Path);
  Track videoTracks = null;// 获取视频的单纯视频部分
  for (Track videoMovieTrack : videoMovie.getTracks()) {
    if ("vide".equals(videoMovieTrack.getHandler())) {
      videoTracks = videoMovieTrack;
    }
  }

  Movie resultMovie = new Movie();
  resultMovie.addTrack(videoTracks);// 视频部分

  Container out = new DefaultMp4Builder().build(resultMovie);
  FileOutputStream fos = new FileOutputStream(new File(outPath));
  out.writeContainer(fos.getChannel());
  fos.close();
}

08. 添加字幕

/**
 * 对 Mp4 添加字幕
 *
 * @param mp4Path .mp4 添加字幕之前
 * @param outPath .mp4 添加字幕之后
 */
public static void addSubtitles(String mp4Path, String outPath) throws IOException {
  Movie videoMovie = MovieCreator.build(mp4Path);

  TextTrackImpl subTitleEng = new TextTrackImpl();// 实例化文本通道对象
  subTitleEng.getTrackMetaData().setLanguage("eng");// 设置元数据(语言)

  subTitleEng.getSubs().add(new TextTrackImpl.Line(0, 1000, "Five"));// 参数时间毫秒值
  subTitleEng.getSubs().add(new TextTrackImpl.Line(1000, 2000, "Four"));
  subTitleEng.getSubs().add(new TextTrackImpl.Line(2000, 3000, "Three"));
  subTitleEng.getSubs().add(new TextTrackImpl.Line(3000, 4000, "Two"));
  subTitleEng.getSubs().add(new TextTrackImpl.Line(4000, 5000, "one"));
  subTitleEng.getSubs().add(new TextTrackImpl.Line(5001, 5002, " "));// 省略去测试
  videoMovie.addTrack(subTitleEng);// 将字幕通道添加进视频Movie对象中

  Container out = new DefaultMp4Builder().build(videoMovie);
  FileOutputStream fos = new FileOutputStream(new File(outPath));
  out.writeContainer(fos.getChannel());
  fos.close();
}

这个是添加字幕的简单使用，测试中发现，字幕中传入的参数其实就是时间毫秒值，在5000之后的部分一直显示one，所以在之后就添加了空格。还有一个问题就是添加的第一个字幕总是显示不出来。

09. MP4的切割

/**
 * 将 MP4 切割
 *
 * @param mp4Path    .mp4
 * @param fromSample 起始位置
 * @param toSample   结束位置
 * @param outPath    .mp4
 */
public static void cropMp4(String mp4Path, long fromSample, long toSample, String outPath) throws IOException {
  Movie mp4Movie = MovieCreator.build(mp4Path);
  Track videoTracks = null;// 获取视频的单纯视频部分
  for (Track videoMovieTrack : mp4Movie.getTracks()) {
    if ("vide".equals(videoMovieTrack.getHandler())) {
      videoTracks = videoMovieTrack;
    }
  }
  Track audioTracks = null;// 获取视频的单纯音频部分
  for (Track audioMovieTrack : mp4Movie.getTracks()) {
    if ("soun".equals(audioMovieTrack.getHandler())) {
      audioTracks = audioMovieTrack;
    }
  }

  Movie resultMovie = new Movie();
  resultMovie.addTrack(new AppendTrack(new CroppedTrack(videoTracks, fromSample, toSample)));// 视频部分
  resultMovie.addTrack(new AppendTrack(new CroppedTrack(audioTracks, fromSample, toSample)));// 音频部分

  Container out = new DefaultMp4Builder().build(resultMovie);
  FileOutputStream fos = new FileOutputStream(new File(outPath));
  out.writeContainer(fos.getChannel());
  fos.close();
}

参数列表中的起始位置和结束位置并不是时间毫秒值。点击CroppedTrack查看源码注释并没有理解这两个参数的具体含义，根据语境貌似是在说起始和结束的帧。

10. 小结

之前写的时候都是一个个方法，今天重新整理给搞成一个工具类进行封装。源码项目中有一个examples的模块，其中有大量的demo可以查看，当下记录的方法还是比较浅显的，其他更多没有研究到，这个东西有难啃呀。其他格式没有涉及，好的格式是不支持的。相关资料并没有找到很多，自己使用的基本记录在此，以后看情况更新。

最后编辑于：2017.12.06 03:51:45

人面猴
序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
沈念sama阅读 158,736评论 4赞 362
死咒
序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
沈念sama阅读 67,167评论 1赞 291
救了他两次的神仙让他今天三更去死
文/潘晓璐我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
开封第一讲书人阅读 108,442评论 0赞 243
道士缉凶录：失踪的卖姜人
文/不坏的土叔我叫张陵，是天一观的道长。经常有香客问我，道长，这世上最难降的妖魔是什么？我笑而不...
开封第一讲书人阅读 43,902评论 0赞 204
港岛之恋（遗憾婚礼）
正文为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
茶点故事阅读 52,302评论 3赞 287
恶毒庶女顶嫁案：这布局不是一般人想出来的
文/花漫我一把揭开白布。她就那样静静地躺着，像睡着了一般。火红的嫁衣衬着肌肤如雪。梳的纹丝不乱的头发上，一...
开封第一讲书人阅读 40,573评论 1赞 216
城市分裂传说
那天，我揣着相机与录音，去河边找鬼。笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。我是一名探鬼主播，决...
沈念sama阅读 31,847评论 2赞 312
双鸳鸯连环套：你想象不到人心有多黑
文/苍兰香墨我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
开封第一讲书人阅读 30,562评论 0赞 197
万荣杀人案实录
序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
沈念sama阅读 34,260评论 1赞 241
护林员之死
正文独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋以下内容为张勋视角年9月15日...
茶点故事阅读 30,531评论 2赞 245
白月光启示录
正文我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
茶点故事阅读 32,021评论 1赞 258
活死人
序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
沈念sama阅读 28,367评论 2赞 253
日本核电站爆炸内幕
正文年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
茶点故事阅读 33,016评论 3赞 235
男人毒药：我在死后第九天来索命
文/蒙蒙一、第九天我趴在偏房一处隐蔽的房顶上张望。院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
开封第一讲书人阅读 26,068评论 0赞 8
一桩弑父案，背后竟有这般阴谋
文/苍兰香墨我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。一阵脚步声响...
开封第一讲书人阅读 26,827评论 0赞 194
情欲美人皮
我被黑心中介骗来泰国打工，没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。一个月前我还...
沈念sama阅读 35,610评论 2赞 274
代替公主和亲
正文我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
茶点故事阅读 35,514评论 2赞 269