美文网首页Android进阶Android 源码分析
使用mp4parser进行音视频合成

使用mp4parser进行音视频合成

作者: Brian512 | 来源:发表于2016-10-26 18:19 被阅读2147次

    需求:相机录制短视频,支持暂停继续,并配有背景音乐。
    由于Android自带的MediaRecorder并不支持视频录制暂停,所以只能录制视频片段,最后录制结束时将之前录制的视频片段合并起来。背景音乐也是需要合成到视频中。网上搜索到的大多数解决方案是使用mp4parser,名字看上去就感觉挺上手的,后面一看包名,竟然是googlecode,所以义无反顾的使用mp4parser。
    很多博客里面都有给出mp4parser合并mp4的代码,并且也不难。于是我就到官网下载最新的jar包isoviewer-1.0-RC-35.jar,但是合并后的视频死活都有问题。


    重大更新:

    compile 'com.googlecode.mp4parser:isoparser:1.1.21'
    

    多谢@壹口尘埃提醒,作者把库共享到jcenter了,只不过没有在README里罗列出来。


        public static boolean joinVideo(List<String> filePaths, String resultPath) {
            boolean result = false;
    
            if (filePaths == null || filePaths.size() <= 0 || TextUtils.isEmpty(resultPath)) {
                throw new IllegalArgumentException();
            }
            if (filePaths.size() == 1) { // 只有一个视频片段,不需要合并
                return true;
            }
    
            try {
                Movie[] inMovies = new Movie[filePaths.size()];
                for (int i = 0; i < filePaths.size(); i++) {
                    LogUtil.w("filePaths=" + filePaths.get(i));
                    File f = new File(filePaths.get(i));
                    if (f.exists()) {
                        inMovies[i] = MovieCreator.build(filePaths.get(i));
                    }
                }
    
                // 分别取出音轨和视频
                List<Track> videoTracks = new LinkedList<>();
                List<Track> audioTracks = new LinkedList<>();
                for (Movie m : inMovies) {
                    for (Track t : m.getTracks()) {
                        if (t.getHandler().equals("soun")) {
                            audioTracks.add(t);
                        }
                        if (t.getHandler().equals("vide")) {
                            videoTracks.add(t);
                        }
                    }
                }
    
                // 合并到最终的视频文件
                Movie outMovie = new Movie();
    
                if (audioTracks.size() > 0) {
                    outMovie.addTrack(new AppendTrack(audioTracks.toArray(new Track[audioTracks.size()])));
                }
                if (videoTracks.size() > 0) {
                    outMovie.addTrack(new AppendTrack(videoTracks.toArray(new Track[videoTracks.size()])));
                }
    
                Container mp4file = new DefaultMp4Builder().build(outMovie);
    
                // 将文件输出
                File resultFile = new File(resultPath);
                if (resultFile.exists() && resultFile.isFile()) {
                    resultFile.delete();
                }
                FileChannel fc = new RandomAccessFile(resultFile, "rw").getChannel();
                mp4file.writeContainer(fc);
                fc.close();
    
                // 合成完成后把原片段文件删除
                for (String filePath : filePaths) {
                    File file = new File(filePath);
                    file.delete();
                }
                result = true;
            } catch (FileNotFoundException e) {
                e.printStackTrace();
            } catch (Exception e) {
                e.printStackTrace();
            }
            return result;
        }
    

    最后,实在不知道哪里有问题,就把isoviewer-1.0-RC-35.jar替换为isoviewer-1.0-RC-28.jar,竟然可以了!!!心中一万匹马。。。然后,我就试了一下isoviewer-1.0-RC-29.jar,又不行。恍然大悟,难怪网上博客上面使用的版本都是27、28的。但是我就很纳闷,为啥新版的就不行呢?!然后一看官网上面最新版本isoviewer-1.0-RC-35.jar的更新时间为2014年2月20号。。。
    后面看commit记录才发现:


    原来后面把代码托管到github上了,并且github上面的最新更新时间是两个月前,感觉这个比较靠谱一点。
    但是,这是一个java库,我尝试着把代码copy到我的AndroidLibrary里面,发现太痛苦了,需要aspectj,slf4j-android等依赖,等我把这些jar包都导入之后,发现合成视频出问题了。以完成任务为首要,所以我就乖乖使用现成的jar,旧一点就旧一点吧!

    合并好视频之后,就是把视频和音频合并起来,mp4parser也是支持这个的。使用的时候发现isoviewer-1.0-RC-28.jar不支持mp3格式的音频,MP3TrackImpl只有在高于28版本上才有,然后就呵呵哒了。
    遇到困难,还是得硬着头皮往上顶。从github上的项目看MP3TrackImpl比较方面拓展,就想着把28版本的源码下载下来,然后把MP3TrackImpl加进去,但是。。。对,又出现但是了:


    3个G,瞬间吓尿了,对比起来还是到github上拉代码方便一点。刚才也说到了,github上的是java库,并不太方便移植过来。于是乎就寄希望于release,

    发现release都是代码压缩包。。。网上又找不到新版本的jar包。。。
    活活煎熬了一天之后,重新来找release。翻到最后一页,终于看到一个jar包。

    赶紧集成替换,这个jar不包含aspectjrt.jar,所以得另外导入。运行后发现,合并视频没有问题,但是集成mp3却一直crash。最终,心力憔悴,暂时放弃!尝试ffmpeg

    https://code.google.com/archive/p/mp4parser/
    https://github.com/sannies/mp4parser


    如果有大神知道如何合并音视频,敬请赐教!

    相关文章

      网友评论

      • Ray_Zeng:大神,能get一份FFmpeg合成的代码吗 我现在也在弄这个 谢谢啦
        Brian512: @BugLessOnly 参考我关于ffmpeg的文章
      • 0c32f8a7a30e:作者,请问一下实现 录音文件加入背景音乐的需求 用 mp4parser 可以吗? 有什么推荐的方法呢?
        倾城_之泪:使用Android原生的MediaExtractor和MediaMuxer可以实现音视频的合成。不过有几个缺点:
        1.MediaMuxer是在4.3(API18)中新增的类,无法兼容低版本;
        2.音频如果是MP3的话需要使用MediaCodec重新编码,因此建议直接使用m4a的音频文件,可以直接合成;
        3.音视频长度不同时的处理措施。
        OneBelowZero:@Brian512 楼主 请教一下 ffmpeg怎么实现的 我现在也遇到这类音频转码 合并的问题 找了好多 最后只找到 compile 'com.googlecode.mp4parser:isoparser:1.1.21' compile 'com.github.adrielcafe:AndroidAudioConverter:0.0.8' 这两个有用的
        Brian512: @OAOAAce 如果是mp4parser支持的格式就好办,若不支持就用ffmpeg
      • Jaycee88:遇到同样的问题,最近有录制视频添加背景音乐的需求,也研究了mp4parser,现在还没跑通,希望可以和作者一起研讨下
        11amok:遇到个问题。。用mp4parser来将h264编码文件封装为mp4,发现如果视频总帧数不到20帧左右的话,mp4parser 会转换失败,生成一个很小的文件,无法播放。而原h264文件是可以播放的。为了避免这个问题,专门延长了录制时间保证大于30帧,经大量测试这样转换没问题。
        Brian512: @壹口尘埃 用ffmpeg解决了

      本文标题:使用mp4parser进行音视频合成

      本文链接:https://www.haomeiwen.com/subject/uvxjuttx.html