iOS 集成FFmpeg与使用

iOS基于FFmpeg 4.1 的命令编译

1、iOS集成FFmpeg

下载脚本FFmpeg脚本地址

这里目前使用的是最新的4.1（分支ffmpeg-3.0 编译FFmpeg 3.0）

2、编译FFmpeg-iOS-build-script，获得FFmpeg静态库文件

打开脚步地址终端执行

./build-ffmpeg.sh

编译的时间略长，请耐心等待

3、iOS项目集成FFmpeg

• 上步操作执行成功后，会生成FFmpeg-iOS文件，将该文件直接拖到项目中
• 配置头文件搜索路径：在工程文件->Bulid Setting->Search Paths->Header Search Paths添加(PRODUCT_NAME)/FFmpeg-iOS/include,(请根据自己实际路径更改)
• 使用FFmpeg工具命令，添加以下文件

config.h文件scratch目录下的任意架构的config.h，其余的在/ffmpeg-4.1/fftools目录下，之前版本有的直接在ffmpeg-4.1目录下

 config.h
 cmdutils.c
 cmdutils.h
 ffmpeg_cuvid.c
 ffmpeg_filter.c
 ffmpeg_hw.c
 ffmpeg_opt.c
 ffmpeg_videotoolbox.c
 ffmpeg.c
 ffmpeg.h

编译后会报错，然后根据提示挨个修复，还需要导入相应的依赖库的头文件（ffmpeg-4.1目录下相应的缺失.h文件，拷贝到工程里面）

最后会报错 duplicate symbols for architecture arm64 是因为main函数有两个，在ffmpeg.h中添加一个函数声明：

int ffmpeg_main(int argc, char **argv);

在ffmpeg.c 文件，将main改为名为ffmpeg_main的入口函数，编译OK

FFmpeg .a 头文件注释

libavformat：用于各种音视频封装格式的生成和解析；
libavcodec：用于各种类型声音、图像编解码；
libavutil：包含一些公共的工具函数；
libswscale：用于视频场景比例缩放、色彩映射转换；
libpostproc：用于后期效果处理；
ffmpeg：该项目提供的一个工具，可用于格式转换、解码或电视卡即时编码等；
ffsever：一个 HTTP 多媒体即时广播串流服务器；
ffplay：是一个简单的播放器，使用ffmpeg 库解析和解码，通过SDL显示；

常用命令

• 分离视频音频流

ffmpeg -i input_file -vcodec copy -an output_file_video　　//分离视频流
ffmpeg -i input_file -acodec copy -vn output_file_audio　　//分离音频流

• 视频解复用

ffmpeg –i test.mp4 –vcodec copy –an –f m4v test.264
ffmpeg –i test.avi –vcodec copy –an –f m4v test.264

• 视频转码

ffmpeg –i test.mp4 –vcodec h264 –s 352*278 –an –f m4v test.264              //转码为码流原始文件
ffmpeg –i test.mp4 –vcodec h264 –bf 0 –g 25 –s 352*278 –an –f m4v test.264  //转码为码流原始文件
ffmpeg –i test.avi -vcodec mpeg4 –vtag xvid –qsame test_xvid.avi            //转码为封装文件
//-bf B帧数目控制，-g 关键帧间隔控制，-s 分辨率控制

• 视频封装

ffmpeg –i video_file –i audio_file –vcodec copy –acodec copy output_file

• 视频剪切

ffmpeg –i test.avi –r 1 –f image2 image-%3d.jpeg        //提取图片
ffmpeg -ss 0:1:30 -t 0:0:20 -i input.avi -vcodec copy -acodec copy output.avi    //剪切视频
//-r 提取图像的频率，-ss 开始时间，-t 持续时间

• 视频录制

ffmpeg –i rtsp://192.168.3.205:5555/test –vcodec copy out.avi

• YUV序列播放

ffplay -f rawvideo -video_size 1920x1080 input.yuv

• YUV序列转AVI

ffmpeg –s w*h –pix_fmt yuv420p –i input.yuv –vcodec mpeg4 output.avi

• 压缩转码mp4文件

ffmpeg -i input.avi -s 640x480 output.avi
ffmpeg -i input.avi -strict -2 -s vga output.avi

• 将文件当做直播送至live

ffmpeg -re -i localFile.mp4 -c copy -f flv rtmp://server/live/streamName

• 将直播媒体保存至本地文件

ffmpeg -i rtmp://server/live/streamName -c copy dump.flv

• 将其中一个直播流，视频改用h264压缩，音频不变，送至另外一个直播服务流

ffmpeg -i rtmp://server/live/originalStream -c:a copy -c:v libx264 -vpre slow -f flv rtmp://server/live/h264Stream

• 将其中一个直播流，视频改用h264压缩，音频改用faac压缩，送至另外一个直播服务流

ffmpeg -i rtmp://server/live/originalStream -c:a libfaac -ar 44100 -ab 48k -c:v libx264 -vpre slow -vpre baseline -f flv rtmp://server/live/h264Stream

• 将其中一个直播流，视频不变，音频改用faac压缩，送至另外一个直播服务流

ffmpeg -i rtmp://server/live/originalStream -acodec libfaac -ar 44100 -ab 48k -vcodec copy -f flv rtmp://server/live/h264_AAC_Stream

• 将一个高清流，复制为几个不同视频清晰度的流重新发布，其中音频不变

ffmpeg -re -i rtmp://server/live/high_FMLE_stream -acodec copy -vcodec x264lib -s 640×360 -b 500k -vpre medium -vpre baseline rtmp://server/live/baseline_500k -acodec copy -vcodec x264lib -s 480×272 -b 300k -vpre medium -vpre baseline rtmp://server/live/baseline_300k -acodec copy -vcodec x264lib -s 320×200 -b 150k -vpre medium -vpre baseline rtmp://server/live/baseline_150k -acodec libfaac -vn -ab 48k rtmp://server/live/audio_only_AAC_48k

• 功能一样，只是采用-x264opts选项

ffmpeg -re -i rtmp://server/live/high_FMLE_stream -c:a copy -c:v x264lib -s 640×360 -x264opts bitrate=500:profile=baseline:preset=slow rtmp://server/live/baseline_500k -c:a copy -c:v x264lib -s 480×272 -x264opts bitrate=300:profile=baseline:preset=slow rtmp://server/live/baseline_300k -c:a copy -c:v x264lib -s 320×200 -x264opts bitrate=150:profile=baseline:preset=slow rtmp://server/live/baseline_150k -c:a libfaac -vn -b:a 48k rtmp://server/live/audio_only_AAC_48k

• 将当前摄像头及音频通过DSSHOW采集，视频h264、音频faac压缩后发布

ffmpeg -r 25 -f dshow -s 640×480 -i video=”video source name”:audio=”audio source name” -vcodec libx264 -b 600k -vpre slow -acodec libfaac -ab 128k -f flv rtmp://server/application/stream_name

• 将一个JPG图片经过h264压缩循环输出为mp4视频

ffmpeg.exe -i INPUT.jpg -an -vcodec libx264 -coder 1 -flags +loop -cmp +chroma -subq 10 -qcomp 0.6 -qmin 10 -qmax 51 -qdiff 4 -flags2 +dct8x8 -trellis 2 -partitions +parti8x8+parti4x4 -crf 24 -threads 0 -r 25 -g 25 -y OUTPUT.mp4

• 将普通流视频改用h264压缩，音频不变，送至高清流服务(新版本FMS live=1)

ffmpeg -i rtmp://server/live/originalStream -c:a copy -c:v libx264 -vpre slow -f flv "rtmp://server/live/h264Stream live=1"

• 采集usb摄像头视频命令：

ffmpeg -t 20 -f vfwcap -i 0 -r 8 -f mp4 cap1111.mp4

./ffmpeg -t 10 -f vfwcap -i 0 -r 8 -f mp4 cap.mp4
具体说明如下：我们采集10秒，采集设备为vfwcap类型设备，第0个vfwcap采集设备（如果系统有多个vfw的视频采集设备，可以通过-i num来选择），每秒8帧，输出方式为文件，格式为mp4。

• 最简单的抓屏：

ffmpeg -f gdigrab -i desktop out.mpg 

• 从屏幕的（10,20）点处开始，抓取640x480的屏幕，设定帧率为5 ：

ffmpeg -f gdigrab -framerate 5 -offset_x 10 -offset_y 20 -video_size 640x480 -i desktop out.mpg 

• ffmpeg从视频中生成gif图片：

ffmpeg -i capx.mp4 -t 10 -s 320x240 -pix_fmt rgb24 jidu1.gif

常用参数说明：

主要参数：

• -i 设定输入流
• -f 设定输出格式
• -ss 开始时间 视频参数：
• -b 设定视频流量，默认为200Kbit/s
• -r 设定帧速率，默认为25
• -s 设定画面的宽与高
• -aspect 设定画面的比例
• -vn 不处理视频
• -vcodec 设定视频编解码器，未设定时则使用与输入流相同的编解码器 音频参数：
• -ar 设定采样率
• -ac 设定声音的Channel数
• -acodec 设定声音编解码器，未设定时则使用与输入流相同的编解码器
• -an 不处理音频

最后附上一个格式转换的Demo
Demo