(五)利用FFmpeg 命令行fftools转码视频

2020-12-23 09:58:31 浏览数 (1)

利用FFmpeg转码视频并支持裁剪,这是目前我们团队提到的一个需求点,我们的项目多采用Swift语言,Demo便采用Swift吧,并不影响核心代码。两套方案:fftools和API,本章采用fftools实现,下一章实现调用FFmpeg API实现视频转码

在FFmpeg 命令行工具我们已经详细介绍了视频转码的命令和参数配置,本文结合需求将iPhone录制的mov转码为MP4,也可直接将原始码流转码为MP4。

开始前,我们先用iPhone录制一个mov格式的视频,保存在了Demo里面使用。

  • 1、将编译好的FFmpeg、x264、fdk_aac导入工程
  • 2、修配置头文件搜索路径,在工程文件->Bulid Setting->Search Paths->Header Search Paths添加

(PRODUCT_NAME)/FFmpeg-iOS/include,(请根据自己实际路径更改)

  • 3、添加依赖:

libbz2.tbd

libz.tbd

libiconv.tbd

CoreMedia.framework

VideoToolbox.framework

AudioToolbox.framework

AVFoundation.framework

到这一步其实已经可以使用library库了,如果要对音视频进行操作,需要手动写C 代码去调用 API 使用FFmpeg。你可以导入 #import "avformat.h" 在代码中 写 av_register_all() 然后进行编译,如果没有报错,代表编译成功。av_register_all() 目前版本已经弃用,只是做测试。

如果想要使用Tool工具来调用 FFmpg 的话,就是直接通过调用传参的方式执行ffmpeg 命令的话,就需要导入对应的文件。

  • 4、集成FFmpeg的命令行工具fftools
代码语言:javascript复制
在iOS上集成FFmpeg的命令行工具fftools是个繁琐的过程,各个版本之间还有差异,需要导入的文件不一样.

从 ffmpeg-4.2 中找到以下fftools文件夹并拷贝以下相关文件:

image.png

从scratch 文件夹中找到

代码语言:javascript复制
config.h
  • 5、注释代码、补充文件,如果不清楚用途基本上是缺啥补啥
代码语言:javascript复制
cmdutils.c  

注释:
#include "compat/va_copy.h"
#include "libavresample/avresample.h"
#include "libavutil/libm.h"

PRINT_LIB_INFO(avresample, AVRESAMPLE, flags, level);

添加:
libavformat/network.h  文件
代码语言:javascript复制
ffmpeg.h
添加:
libavutil/thread.h  文件
代码语言:javascript复制
ffprobr.c
注释:
#include "libavutil/libm.h"
代码语言:javascript复制
ffmpeg_filter.c 
注释:
#include "libavresample/avresample.h"
代码语言:javascript复制
ffmpeg.c
注释:
#include "libavutil/internal.h"
#include "libavutil/libm.h"

            ff_dlog(NULL, "force_key_frame: n:%f n_forced:%f prev_forced_n:%f t:%f prev_forced_t:%f -> res:%fn",
                    ost->forced_keyframes_expr_const_values[FKF_N],
                    ost->forced_keyframes_expr_const_values[FKF_N_FORCED],
                    ost->forced_keyframes_expr_const_values[FKF_PREV_FORCED_N],
                    ost->forced_keyframes_expr_const_values[FKF_T],
                    ost->forced_keyframes_expr_const_values[FKF_PREV_FORCED_T],
                    res);


新增:
#include "libavcodec/mathops.h"
#include "libavutil/reverse.h"

到此基本上就文件添加、修改差不多了,编译。

优化:

1、避免两个main函数问题:

代码语言:javascript复制
ffmpeg.h 文件下增加函数声明:
int ffmpeg_main(int argc, char **argv);
ffmpeg.c 文件中:
main函数修改为ffmpeg_main;主要是为了避免两个main函数存在

2、计数器置零问题 (ffmpeg.c的代码中会访问空属性导致程序崩溃)

代码语言:javascript复制
在 ffmpeg.c 中 找到 ffmpeg_cleanup 方法,在 term_exit() 前,将各个计数器置零:
    nb_filtergraphs=0;
    nb_output_files=0;
    nb_output_streams=0;
    nb_input_files=0;
    nb_input_streams=0;

3、命令执行结束崩溃问题

Tips:FFmpeg 默认执行完会执行 exit_program 方法结束进程,而iOS下只能启动一个进程,如果默认不做处理,执行完一条命令后app就自动退出了,所以需要做一个处理。

解决方案有两种:
(1)第一种方案(有缺点):
  • 网上流传的方法的方法都是找到 exit_program 函数,然后注释掉结束进程的代码,然后调用 pthread_exit 结束线程来代替结束进程,进行解决。

image

image

这种方法的缺点:
  • 执行完 ffmpeg 的 main 函数后会回调一个code,这个回调是用于判断命令指定过程中是否执行错误的回调。但是我们如果在退出的时候调用了pthread_exit 这样线程就结束了,然后也不会走执行是否成功的回调了。
  • 并且这样的话,想要监听到命令结束,必须要注册一个通知,进行监听线程结束。
(2)第二种方案(修复缺点):
  • 在命令执行完不进行结束线程和进程,只进行 cleanup。
具体做法:
  • 在 ffmpeg.c把所有调用 exit_program 函数 ,改为调用 ffmpeg_cleanup 函数就可以了。

iOS 调用 FFmpeg Tool

目前为止,我们做完上面所有步骤后,我们已经可以调用 FFmpeg Tool 进行各种音视频操作了,例如视频合成、视频转Gif、视频帧操作、视频特效、格式转换,视频调速,等各种操作了。Demo里面实现了本文提到的视频转码功能。

Demo的代码套用网上现有,跟业务相关的需要自己修改。

代码语言:javascript复制
//转换视频
- (void)converWithInputPath:(NSString *)inputPath
                 outputPath:(NSString *)outpath
               processBlock:(void (^)(float process))processBlock
            completionBlock:(void (^)(NSError *error))completionBlock {
    self.processBlock = processBlock;
    self.completionBlock = completionBlock;
    self.isBegin = NO;

    // ffmpeg语法,可根据需求自行更改      !#$ 为分割标记符,也可以使用空格代替
    NSString *commandStr = [NSString stringWithFormat:@"ffmpeg!#$-ss!#$00:00:00!#$-i!#$%@!#$-b:v!#$2000K!#$-y!#$%@", inputPath, outpath];

    [[[NSThread alloc] initWithTarget:self selector:@selector(runCmd:) object:commandStr] start];
}


// 执行指令
- (void)runCmd:(NSString *)commandStr{
    // 判断转换状态
    if (self.isRuning) {
        NSLog(@"正在转换,稍后重试");
    }
    self.isRuning = YES;

    // 根据 !#$ 将指令分割为指令数组
    NSArray *argv_array = [commandStr componentsSeparatedByString:(@"!#$")];
    // 将OC对象转换为对应的C对象
    int argc = (int)argv_array.count;
    char** argv = (char**)malloc(sizeof(char*)*argc);
    for(int i=0; i < argc; i  ) {
        argv[i] = (char*)malloc(sizeof(char)*1024);
        strcpy(argv[i],[[argv_array objectAtIndex:i] UTF8String]);
    }

    ffmpeg_main(argc,argv);
}

获取转码进度

  • 打开视频源时获取总时长
代码语言:javascript复制
ffmpeg_opt.c

1、添加头文件 #include "LEYFFmpegConverOC.h"

2、在static int open_input_file(OptionsContext *o, const char *filename)函数的恰当位置添加回调
setDuration(ic->duration);
我放在av_freep(&opts)释放内存之前。
  • 获取当前转码进度
代码语言:javascript复制
ffmpeg.c

1、添加头文件 #include "LEYFFmpegConverOC.h"

2、在static void print_report(int is_last_report, int64_t timer_start, int64_t cur_time)函数的恰当位置添加回调
setCurrentTime(buf.str);

我放在 fflush(stderr)语句之前。
  • 转码结束
代码语言:javascript复制
ffmpeg.c

1、添加头文件 #include "LEYFFmpegConverOC.h"

2、在ffmpeg_cleanup函数的term_exit()语句之前添加stopRuning();

写在最后

FFmpeg非常强大,相应的,编译选项也就非常的多,要深入了解每个编译选项的意义,这样编译出来的库文件才是适合自己的:用最小的库实现自己的需求。

本教程FFmpeg版本为最新4.2,只单纯集成FFmpeg,没有使用x264和fdk_aac,如需使用自己单独编译替换lib和对应的include即可,iOS使用fftools转码Demo


如果喜欢,请帮忙点赞。支持转载,转载请附原文链接。

0 人点赞