（一）FFmpeg命令行学习
**
前言
概念
媒体流（Stream）：表示时间轴上的一段连续数据，如一段声音数据、一段视频数据或一段字幕数据，可以是压缩的，也可以是非压缩的，压缩的数据需要关联特定的编解码器。
一般情况下： Frame对应压缩前的数据，Packet对应压缩后的数据。
编解码器(Codec)：以帧为单位实现压缩数据和原始数据之间的相互转换的
FFmpeg命令行要解决的问题FFmpeg的转码流程是什么？常见的视频格式包含哪些内容吗？如何把这些内容从视频文件中抽取出来？如何从一种格式转换为另一种格式？如何放大和缩小视频？如何旋转，翻转，填充，裁剪，模糊，锐化视频？如何给视频加logo，删除logo？如何给视频加文本，动态文本？如何处理图片？如何录像，添加动态logo，截图，马赛克视频？项目ffmepg http://ffmpeg.org Windows/Linux/IOS/Androidijkplayer手机端 https://github.com/Bilibili/ijkplayer 基于ffplay.c IOS/AndroidQMPlay2 PC端 https://github.com/zaps166/QMPlay2 Windows/LinuxZLMediaKit 跨平台的 RTMP、RTSP https://github.com/xiongziliang/ZLMediaKit Windows/LinuxEasyDarwin https://github.com/LinChengChun/EasyDarwin Windows/LinuxSRS https://github.com/ossrs/srs Linuxnginx-rtmp https://github.com/arut/nginxL Linux工具VLC media player 视频流播放工具wireshark 网络抓包工具cooledit pro2 音频编辑工具、pcm播放工具
FFMPEG
**ffmpeg各个参数**主要参数：-i 设定输入流-f 设定输出格式(format)-ss 开始时间-t 时间长度视频参数：-vframes 设置要输出的视频帧数-b 设定视频码率-b:v 视频码率-r 设定帧速率-s 设定画面的宽与高-f 输出格式-vn：video no 不处理视频(保护视频)-aspect aspect 设置横纵比 4:3 16:9 或 1.3333 1.7777-vcodec 设定视频编解码器，如果用copy表示原始编解码数据必须被拷贝。-vf 视频过滤器音频参数：-aframes 设置要输出的音频帧数-b:a 音频码率-ar 设定采样率-ac 设定声音的Channel数-acodec 设定声音编解码器，如果用copy表示原始编解码数据必须被拷贝。-an ：audio no 不处理音频(保护音频)-af 音频过滤器ffmpeg -i test.mp4 -b:a 192k -ar 48000 -ac 2 -acodec libmp3lame -aframes 200 out2.mp3ffmpeg -i test.mp4 -vframes 300 -b:v 300k -r 30 -s 640x480 -aspect 16:9 -vcodec libx265**ffmpeg命令行**提取视频：ffmpeg -i in.mp4 -an out.mp4保留编码格式：ffmpeg -i test.mp4 -vcodec copy -an test_copy.h264强制格式：ffmpeg -i test.mp4 -vcodec libx264 -an test.h264保留封装格式 :ffmpeg -i test.mp4 -vcodec copy -an video.mp4提取音频：ffmpeg -i in.mp4 -vn out.aac保留编码格式：ffmpeg -i test.mp4 -acodec copy -vn test.aac 强制格式：ffmpeg -i test.mp4 -acodec libmp3lame -vn test.mp3保留封装格式：ffmpeg -i test.mp4 -acodec copy -vn audio.mp4保持编码格式： ffmpeg -i test.mp4 -vcodec copy -acodec copy test_copy.tsffmpeg -i test.mp4 -codec copy test_copy2.ts改变编码格式： ffmpeg -i test.mp4 -vcodec libx265 -acodec libmp3lame out_h265_mp3.mkv修改帧率： ffmpeg -i test.mp4 -r 15 output2.mp4修改视频码率： ffmpeg -i test.mp4 -b 400k output_b.mkv （此时音频也被重新编码）修改视频码率： ffmpeg -i test.mp4 -b:v 400k output_bv.mkv修改音频码率： ffmpeg -i test.mp4 -b:a 192k output_ba.mp4 如果不想重新编码video，需要加上-vcodec copy修改音视频码率： ffmpeg -i test.mp4 -b:v 400k -b:a 192k output_bva.mp4修改视频分辨率： ffmpeg -i test.mp4 -s 480x270 output_480x270.mp4修改音频采样率: ffmpeg -i test.mp4 -ar 44100 output_44100hz.mp4提取YUV ffmpeg -i test.mp4 -pix_fmt yuv420p test.yuv提取3秒数据，分辨率和源视频一致ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p yuv420p_orig.yuv提取3秒数据，分辨率转为320x240 ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p -s 320x240 yuv420p_320x240.yuv 提取RGBffmpeg -i test.mp4 -pix_fmt bgra test.rgb提取3秒数据，分辨率转为320x240 ffmpeg -i test.mp4 -t 3 -pix_fmt rgb24 -s 320x240 rgb24_320x240.rgbRGB和YUV之间的转换 ffmpeg -s 320x240 -pix_fmt yuv420p -i yuv420p_320x240.yuv -pix_fmt rgb24 rgb24_320x240_2.rgb提取PCMffmpeg -i test.mp4 -f s16le tset.pcmffmpeg -i input.mp4 -vn -ar 44100 -ac 2 -f s16le s16le.pcmffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f s16le 48000_2_s16le.pcm（pcm删掉）ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -sample_fmt s16 out_s16.wav ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -codec:a pcm_s16le out2_s16le.wav ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm（pcm删掉）ffmpeg -i test.mp4 -t 10 -vn -ar 48000 -ac 2 -f f32le 48000_2_f32le_2.pcm（pcm删掉）播放PCMffplay -ar 44100 -ac 2 -f s16le -i s16le.pcmPCM->AACffmpeg -ar 44100 -ac 2 -f s16le -i s16le.pcm out.aac视频截取10秒内容 ffmpeg -i 复仇者联盟3.mp4 -ss 00:05:00 -t 10 -codec copy 2.mp4如果音视频格式不统一则强制统一为 -vcodec libx264 -acodec aac将上述2.mp4转成ts格式 ffmpeg -i 2.mp4 -codec copy -vbsf h264_mp4toannexb 1.ts将上述2.mp4转成flv格式 ffmpeg -i 2.mp4 -codec copy 1.flv附录：分离某些封装格式（例如MP4/FLV/MKV等）中的H.264的时候，需要首先写入SPS和PPS，否则会导致分离出来的数据没有SPS、PPS而无法播放。H.264码流的SPS和PPS信息存储在AVCodecContext结构体的extradata中。需要使用ffmpeg中名称为“h264_mp4toannexb”的bitstream filter处理 以MP4格式进行拼接 ffmpeg -f concat -i mp4list.txt -codec copy out_mp42.mp4以TS格式进行拼接 方法1：ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out_ts.mp4 方法2：ffmpeg -f concat -i tslist.txt -codec copy out_ts2.mp4以FLV格式进行拼接 ffmpeg -f concat -i flvlist.txt -codec copy out_flv2.mp4方法1只适用部分封装格式，比如TS 建议：（1）使用方法2进行拼接（2）转成TS格式再进行拼接修改音频编码 ffmpeg -i 2.mp4 -vcodec copy -acodec ac3 -vbsf h264_mp4toannexb 2.ts ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out1.mp4 结果第二段没有声音修改音频采样率 ffmpeg -i 2.mp4 -vcodec copy -acodec aac -ar 96000 -vbsf h264_mp4toannexb 2.ts ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out2.mp4 第二段播放异常 修改视频编码格式ffmpeg -i 1.mp4 -acodec copy -vcodec libx265 1.ts ffmoeg -i 1.mp4 2.ts 没什么用ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out3.mp4 修改视频分辨率 ffmpeg -i 1.mp4 -acodec copy -vcodec libx264 -s 800x472 -vbsf h264_mp4toannexb 1.ts ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out4.mp4 注意：把每个视频封装格式也统一为ts，拼接输出的时候再输出你需要的封装格式，比如MP4视频分辨率可以不同，但是编码格式需要统一音频编码格式需要统一，音频参数(采样率/声道等)也需要统一截取一张图片 ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.jpg ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.bmp -i 输入 -y 覆盖 -f 格式 image2 一种格式 -ss 起始值 -vframes 帧 如果大于1 那么 输出加%03d test%03d.jpg -s 格式大小size转换视频为图片（每帧一张图): ffmpeg -i test.mp4 -t 5 -s 640x360 -r 15 frame%03d.jpg 图片转换为视频: ffmpeg -f image2 -i frame%03d.jpg -r 25 video.mp4从视频中生成GIF图片ffmpeg -i test.mp4 -t 5 -r 1 image1.gifffmpeg -i test.mp4 -t 5 -r 25 -s 640x360 image2.gif将 GIF 转化为 视频 ffmpeg -f gif -i image2.gif image2.mp4
FFPLAY
**ffplay各个参数**-x width 强制显示宽带。-y height 强制显示高度。-video_size size 帧尺寸 设置显示帧存储(WxH格式)，仅适用于类似原始YUV等没有包含帧大小(WxH)的视频 比如: ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5 yuv420p_320x240.yuv-pixel_format format 格式设置像素格式。-fs 以全屏模式启动。-an 禁用音频（不播放声音）-vn 禁用视频（不播放视频）-sn 禁用字幕（不显示字幕）-ss pos 根据设置的秒进行定位拖动，注意时间单位：比如'55' 55 seconds, '12:03:45' ,12 hours, 03 minutes and 45 seconds, '23.189' 23.189 second-t duration 设置播放视频/音频长度，时间单位如 -ss选项-bytes 按字节进行定位拖动（0=off 1=on -1=auto）-seek_interval interval 自定义左/右键定位拖动间隔（以秒为单位），默认值为10秒（代码没有看到实现）-nodisp 关闭图形化显示窗口，视频将不显示-noborder 无边框窗口-volume vol 设置起始音量。音量范围[0 ~100]-f fmt 强制使用设置的格式进行解析。比如-f s16le-window_title title 设置窗口标题（默认为输入文件名）-loop number 设置播放循环次数-showmode mode 设置显示模式，可用的模式值：0 显示视频，1 显示音频波形，2 显示音频频谱。缺省为0，如果视频不存在则自动选择2-vf filtergraph 设置视频滤镜-af filtergraph 设置音频滤镜-stats 打印多个回放统计信息，包括显示流持续时间，编解码器参数，流中的当前位置，以及音频/视频同步差值。默认情况下处于启用状态，要显式禁用它则需要指定-nostats-fast 非标准化规范的多媒体兼容优化-genpts 生成pts-sync type 同步类型 将主时钟设置为audio（type=audio），video（type=video）或external（type=ext），默认是audio为主时钟-ast audio_stream_specifier 指定音频流索引，比如-ast 3，播放流索引为3的音频流-vst video_stream_specifier 指定视频流索引，比如-vst 4，播放流索引为4的视频流-sst subtitle_stream_specifier 指定字幕流索引，比如-sst 5，播放流索引为5的字幕流-autoexit 视频播放完毕后退出。-exitonkeydown 键盘按下任何键退出播放-exitonmousedown 鼠标按下任何键退出播放-codec:media_specifier codec_name 强制使用设置的多媒体解码器，media_specifier可用值为a（音频）， v（视频）和s字幕。比如-codec:v h264_qsv 强制视频采用h264_qsv解码-acodec codec_name 强制使用设置的音频解码器进行音频解码-vcodec codec_name 强制使用设置的视频解码器进行视频解码-scodec codec_name 强制使用设置的字幕解码器进行字幕解码-autorotate 根据文件元数据自动旋转视频。值为0或1 ，默认为1-framedrop 如果视频不同步则丢弃视频帧。当主时钟非视频时钟时默认开启。若需禁用则使用-noframedrop-infbuf 不限制输入缓冲区大小。尽可能快地从输入中读取尽可能多的数据。播放实时流时默认启用，如果未及时读取数据，则可能会丢弃数据。此选项将不限制缓冲区的大小。若需禁用则使用-noinfbuf**ffplay命令行**播放本地文件ffplay -window_title "test time" -ss 2 -t 10 -autoexit test.mp4ffplay buweishui.mp3播放网络流ffplay -window_title "rtmp stream" rtmp://202.69.69.180:443/webcast/bshdlive-pc强制解码器mpeg4解码器：ffplay -vcodec mpeg4 test.mp4h264解码器：ffplay -vcodec h264 test.mp4 禁用音频：ffplay test.mp4 -an禁用视频：ffplay test.mp4 -vn播放YUV数据ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5 yuv420p_320x240.yuv播放RGB数据ffplay -pixel_format rgb24 -video_size 320x240 -i rgb24_320x240.rgbffplay -pixel_format rgb24 -video_size 320x240 -framerate 5 -i rgb24_320x240.rgb播放PCM数据ffplay -ar 44100 -channels 2 -f s16le -i xxx.pcmffplay -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm-ar set audio sampling rate (in Hz) (from 0 to INT_MAX) (default 0) -ac set number of audio channels (from 0 to INT_MAX) (default 0)视频旋转 ffplay -i test.mp4 -vf transpose=1 视频反转 ffplay test.mp4 -vf hflip ffplay test.mp4 -vf vflip 视频旋转和反转 ffplay test.mp4 -vf hflip,transpose=1音频变速播放 ffplay -i test.mp4 -af atempo=2 视频变速播放 ffplay -i test.mp4 -vf setpts=PTS/2 音视频同时变速 ffplay -i test.mp4 -vf setpts=PTS/2 -af atempo=2
（二）FFmpeg源码级学习
未完待续…
（三）FFmpeg开源项目代码
未完待续…
