23.先进的技术点

加入音频和视频文件

有几种加入媒体文件，它们在表格中描述：

连接与shell命令

媒体文件连接的先决条件

在Windows上，我们可以使用带有/B标志的复制命令来指示二进制模式，在文件之间必须是一个加号。连接N文件的复制命令的一般形式是:

copy /B file1+file2+...+fileN-1+fileN outputFile

例如，连接文件videoclip1。mpg和videoclip2。mpg到文件视频。mpg，我们可以使用以下命令:

copy /B videoclip1.mpg+videoclip2.mpg video.mpg

在Linux、Unix和OS X上，我们可以在表单中使用cat命令:cat file1 files2 > file3，因此我们可以修改前面的例子:

cat videoclip1.mpg videoclip2.mpg > video.mpg

链接concat协议

另一种选择是使用concat协议，先决条件类似于复制命令。例如，要使用该协议修改前面的示例，我们可以使用以下命令:

ffmpeg -i concat:&##34;videoclip1.mpg|videoclip2.mpg&##34; -c copy video.mpg

我的测试命令：

ffmpeg -i concat:&##34;/Users/zhangfangtao/Desktop/test.mp4|/Users/zhangfangtao/Desktop/test2.mp4&##34; -c copy /Users/zhangfangtao/Desktop/test3.mp4 

• 显示效果：

生成了一个新的视频，不过我感觉这个视频和test1没有什么差别。

连接concat过滤器

用于音频和视频拼接的特殊过滤器是在表中描述的concat过滤器:

适当筛选结果的先决条件:

• 所有段必须从时间戳0开始。

• 相应的流必须在所有段中使用相同的参数，特别是视频大小。

• 建议是相同的帧速率，否则输出将使用可变帧速率。

  Concat filter可以加入各种格式，有些例子是:

ffmpeg -i input1.avi -i input2.avi -filter_complex concat output.avi 
ffmpeg -i input1.avi -i input2.avi -filter_complex concat output.mp4
ffmpeg -i input1.avi -i input2.mp4 -filter_complex concat output.webm
ffmpeg -i input1.avi -i input2.mp4 -i input3.mkv -filter_complex ^ concat=n=3 output.flv
ffmpeg -i input1.avi -i input2.avi -i input3.avi -i input4.avi ^ -filter_complex concat=n=4 output.mp4
f -i 1.avi -vf movie=2.avi[a];[in][a]concat a.mp4

我的测试命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -i /Users/zhangfangtao/Desktop/test3.mp4 -filter_complex concat /Users/zhangfangtao/Desktop/test4.mp4

• 显示效果：

  生成了一个视频，里面包含前两段的是视频内容，不过，有效时长只是第一段视频的长度。后面有种无效的感觉。。。。

其他类型的拼接技术

• 音频合并（多个流到1个多声道流） - 在数字音频一章中介绍
• 将几个音频文件混合到1 - 在数字音频一章中有描述
• 多路复用 - 在“FFmpeg基本介绍”一章中介绍了媒体流的选择
• overlay-在overlay-画中画章节里面有具体的描述。

移除掉logo

一些视频包含公司标志，通常位于左上角，常见示例是录制电视节目。 FFmpeg包含2个特殊滤镜以去除徽标，而最终效果并不总是完美，不过在许多情况下这种移除logo的技术还是可以接受的。

delogo过滤器

例如，我们首先从下图所示的800x600像素大小视频的右上角移除一个标志，我们通过显示一个绿色矩形的显示选项来估计logo的位置:

ffmpeg -i eagles.mpg -vf delogo=x=700:y=0:w=100:h=50:t=3:show=1 nologo.mpg

现在我们可以精确地指定位置和标识的存在几乎是不可见的:

ffmpeg -i eagles.mpg -vf delogo=x=730:y=0:w=70:h=46:t=1 nologo.mpg

我的测试命令如下（没有t参数，我这边不识别这个，报错)：

ffmpeg -i /Users/zhangfangtao/Desktop/ornage.jpeg -vf &##34;delogo=x=15:y=678:w=218:h=20:show=1&##34; /Users/zhangfangtao/Desktop/ornage2.jpeg

• 显示效果(有没有看到一个绿色的框)：

![](https://upload-images.jianshu.io/upload_images/661949-a0ad3a56291d8ab9.jpeg“ data-original-width=”1024” data-original-height=”742” data-original-format=”image/jpeg” data-original-filesize=”55790”/>

有没有看到一个绿色的框

ffmpeg -i /Users/zhangfangtao/Desktop/ornage.jpeg -vf &##34;delogo=x=10:y=700:w=300:h=35&##34; /Users/zhangfangtao/Desktop/ornage3.jpeg 

• 显示效果(水印没了)：

![](https://upload-images.jianshu.io/upload_images/661949-d6d8dc651a2e0a28.jpeg“ data-original-width=”1024” data-original-height=”742” data-original-format=”image/jpeg” data-original-filesize=”52368”/>

水印没了.jpeg

抖动视频部分的固定

没有三脚架或车辆拍摄的视频的一些部分通常包括抖动 - 水平和垂直移动的小变化，在某些情况下可以使用去抖滤波器进行修正：

参数可以按顺序进入默认顺序或以任何顺序指定名称:

ffmpeg -i travel.avi -vf deshake fixed_travel.avi
ffmpeg -i travel.avi -vf deshake=contrast=160 fixed.avi
ffmpeg -i travel.avi -vf deshake=blocksize=4:filename=log.txt fixed.avi

我的测试命令：

ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4  -vf deshake /Users/zhangfangtao/Desktop/1527143198.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4  -vf deshake=contrast=160 /Users/zhangfangtao/Desktop/1527143199.mp4
ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4 -vf deshake=blocksize=4:filename=/Users/zhangfangtao/Desktop/log.txt /Users/zhangfangtao/Desktop/1527143200.mp4

• 显示效果：其实，我并没有看出来什么效果。。。可能我用手机拍的抖得太厉害了。。。

  第三条指令打印出来的txt信息截图如下：

log.txt

将颜色框添加到视频

使用drawbox，我们可以在矩形区域找到精确的坐标，以在其中搜索运动矢量，它用于除雾过滤器。 其他用途包括各种图表，方案等。

例如，要在SVGA大小的输入上添加一个尺寸为600x400像素的黄色框，其大小为左侧150像素和顶部0像素，我们可以使用以下命令：

ffmpeg -i ship.avi -vf drawbox=x=150:w=600:h=400:c=yellow ship1.avi

我的测试命令：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf drawbox=x=150:w=600:h=400:c=yellow /Users/zhangfangtao/Desktop/test3.mp4

• 显示效果

检测帧数

如果您需要知道有多少帧包含您的视频文件，您可以使用以下命令：

ffmpeg -i input.mpg -f null /dev/null

显示输出的最后两行是:

frame= 250 fps=0.0 q=0.0 Lsize= 0kB time=00:00:10.00 bitrate= 0.0kbits/s
video:16kB audio:0kB subtitle:0 global headers:0kB muxing overhead -100.000000%

帧数为250，表示视频帧的总数，也可以从帧速率和持续时间计算，但结果并不总是准确。

我的测试命如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -f null /dev/null

• 显示效果如下：

检测广告，部分转换或损坏的编码

从电视，互联网等录制的较长视频可以包含带有广告，转场，不完整帧和其他不需要内容的短片。 如果此部分包含黑色框架，则可以使用表中描述的黑色检测过滤器检测它们。

参数的描述（所有的参数都是可选的）

例如，要从源mptestsrc中检测黑帧，命令是(控制台输出如下):

ffmpeg -f lavfi -i mptestsrc -vf blackdetect -f sdl &##39;test&##39;

我的测试命令：

ffmpeg -f lavfi -i mptestsrc -vf blackdetect -f sdl &##39;test&##39;

*显示效果：

用黑帧过滤器进行检测

检测黑帧的另一个过滤器是表中描述的黑帧过滤器：

过滤器blackdetect和blackframe类似，但每个显示不同的信息。 图像上显示使用与黑检测滤镜相同的视频源的黑帧滤镜输出：

ffmpeg -f lavfi -i mptestsrc -vf blackframe -f sdl &##39;test&##39;

我的测试命令如下：

ffmpeg -f lavfi -i mptestsrc -vf blackframe -f sdl &##39;test&##39;

• 显示效果：

只选择指定的帧进行输出

特殊的多媒体过滤器可以选择音频并选择视频启用，以精确指定哪些帧将保留，哪些从输出中排除。

由于select表达式的默认值为1，因此选择过滤器使用的接下来的两个示例会产生相同的结果 - 所有帧将被选择为输出（值如果是0将不会选择任何内容）：

ffmpeg -i input.avi -vf select output.avi
ffmpeg -i input.avi -vf select=1 output.avi

我的测试命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select /Users/zhangfangtao/Desktop/test3.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=1 /Users/zhangfangtao/Desktop/test3.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=0 /Users/zhangfangtao/Desktop/test3.mp4

• 实现效果，前两个命令生成的是和原来一样的视频，最后一个命令，只有音频信息，没有界面。

要选择20到25秒的部分，我们可以使用以下命令:

ffmpeg -i input.avi -vf select=&##34;gte(t\,20)*lte(t\,25)&##34; output.avi

我的测试命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=&##34;gte\(t\,20\)*lte\(t\,25\)&##34; /Users/zhangfangtao/Desktop/test3.mp4

• 实现效果：

  时间的限制不是太准确，，，还是从头给我播放到了最后。。。

若要选择帧内仅为输出，我们可以使用以下命令:

ffmpeg -i input.avi -vf select=&##34;eq(pict_type\,I)&##34; output.avi

我的测试命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=&##34;eq\(pict_type\,I\)&##34; /Users/zhangfangtao/Desktop/test3.mp4

• 实现的结果：

  视频长短没有变，但是视频的大小几乎减少了一半。而且视频少了很多细节。

通过改变纵横比来缩放输入

调整和伸缩视频章节描述了缩放视频帧的缩放过滤器。 另一种方法是使用改变显示宽高比DAR和样本宽高比SAR的setdar和setsar滤波器，它们的关系用公式表示（关于宽高比的细节在词汇表中）：

DAR = width/height * SAR

示例如何使用setdar和setsar过滤器:

ffplay -i input.avi -vf setdar=r=16/9
ffplay -i input.avi -vf setdar=16/9
ffplay -i input.avi -vf setsar=r=1.234
ffplay -i input.avi -vf setsar=1.234

我的测试命令如下：

ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setdar=r=16/9
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setdar=16/9
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setsar=r=1.234
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setsar=1.234

• 显示效果如下：

屏幕抓取

为了将显示输出记录到视频文件中，例如创建一个教程，我们可以使用安装了UScreenCapture直接显示源过滤器的dshow输入设备，下面是下载地址。

http://www.umediaserver.net/bin/UScreenCapture.zip

为了抓取全屏内容，我们可以使用以下命令:

ffmpeg -f dshow -i video=&##34;UScreenCapture&##34; -t 60 screen.mp4

如果我们想抓取一个特定的屏幕区域。我们必须使用regedit Windows工具来修改某些注册表项，相信信息在downloaded UScreenCapture.zip文件里面的README文件里面。

因为我用的MAC电脑，所以我的录屏命令如下：

ffmpeg -f avfoundation -r 30  -i &##34;1:0&##34;  -t 20 /Users/zhangfangtao/Desktop/test2.mp4 

• 显示效果如下：

视频帧的详细信息

为了显示每个视频帧的信息，我们可以使用表格中描述的showinfo过滤器:

例如，下一个命令会生成下面打印的信息，其中包括前三行：

ffmpeg -report -f lavfi -i testsrc -vf showinfo -t 10 showinfo.mpg
n:0 pts:0 pts_time:0 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:88C4D19A plane_checksum:[88C4D19A]
n:1 pts:1 pts_time:0.04 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:C4740AD1 plane_checksum:[C4740AD1]
n:2 pts:2 pts_time:0.08 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:B6DD3DEB plane_checksum:[B6DD3DEB]

我的测试命令如下：

ffmpeg -report -f lavfi -i testsrc -vf showinfo -t 10 /Users/zhangfangtao/Desktop/test.mp4

• 显示效果：

音频频谱

为了使音频频谱可视化，我们可以使用表中描述的示波器滤波器：

例如，下面的图片显示了该命令创建的声谱：

ffmpeg -i audio.mp3 -vf showspectrum audio_spectrum.mp4

我的测试命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/DYZDJ.mp3 -lavfi showspectrum /Users/zhangfangtao/Desktop/test3.mp4

• 效果图

音频波形可视化

来自音频输入的波形可以通过表格中描述的showwaves滤波器进行可视化：

例如，要将music.mp3文件中的波形可视化为waves.mp4文件，我们可以使用以下命令：

ffmpeg -i music.mp3 -vf showwaves waves.mp4

我的测试命令：

ffmpeg -i /Users/zhangfangtao/Desktop/NWDSL.mp3  -lavfi showwaves /Users/zhangfangtao/Desktop/test3.mp4

• 显示效果如图：

语音合成

• 没有Windows环境，下面的没测试，不过AVFoundation做这个相当简单，想了解AVFounadtion怎么实现的点击这里

通过包含libflite外部库，人声可以与来自Flite（Festival Lite）（一种小型可嵌入TTS（文本到语音）引擎）的flite音频源合成。 它由美国卡内基梅隆大学CMU Speech Group开发。 Flite完全用C语言编写，重新实现了音乐节体系结构的核心部分，以实现为每个系统设计的声音之间的兼容性。 爱丁堡大学的节日语音合成系统是构建语音合成系统的框架。 有关Flite的更多详细信息，请访问http://www.speech.cs.cmu.edu/flite

由于flite库增加了10 MB以上的ffmpeg.exe文件，因此它不在官方二进制文件中，而Windows二进制文件可以从http://ffmpeg.tv/flite.php下载（Linux和OS X用户可以编译它们）。 要显示可用语音列表，我们可以使用以下命令：

ffmpeg -f lavfi -i flite=list_voices=1

要让计算机使用女性声音从Message.txt文件中读取文本，该命令为：

ffplay -f lavfi -i flite=textfile=Message.txt:v=slt

例如，要将文字“Happy New Year to all”保存到wish.wav文件中，我们可以使用以下命令：

ffmpeg -f lavfi -i flite=text=&##34;Happy New Year to all&##34;:v=kal16 wish.wav

如果我们想减慢讲话速度以获得更好的听力，我们可以使用以下命令：

ffmpeg -f lavfi -i flite=textfile=text.txt -af atempo=0.5 speech.mp3

一次将输出保存为多种格式

虽然从第一章中解释的命令语法可以清楚看出，但我们可以通过一个命令将处理结果保存为多种格式，例如我们可以将flite语音引擎的输出保存为MP3，WAV和WMA 格式在一个命令中：

ffmpeg -f lavfi -i flite=textfile=speech.txt speech.mp3 speech.wav speech.wma

我们还可以结合音频和视频格式，如果我们从视频输入格式指定音频格式，则只包含音频流，下一个示例中的文件clip.mp3只包含音频流：

ffmpeg -i clip.avi clip.flv clip.mov clip.mp3 clip.mp4 clip.webm

额外的媒体输入到filtergraph

默认情况下，在任何具有-i选项的过滤器之前指定输入文件，并且第一个输入在带有[in]链接标签的过滤器图中可用。 如果我们想要过滤额外的文件，我们可以使用amovie来源作为视频文件的音频和电影来源，它们在表格中描述：

例如，要在输入视频上显示徽标，我们可以使用以下命令：

ffmpeg -i video.mpg -vf movie=logo.png[a];[in][a]overlay video1.mp4

我的测试命令：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf &##34;movie=/Users/zhangfangtao/Desktop/fruit.jpg[a];[in][a]overlay&##34; /Users/zhangfangtao/Desktop/test3.mp4

*显示效果(logo太大了，把视频盖住了)：

例如，sp（seek_point）选项设置为5时，徽标将从开始5秒后显示：

ffmpeg -i video.mpg -vf movie=logo.png:sp=5[a];[in][a]overlay video1.mp4

我的测试命令：

 ffmpeg -i /Users/zhangfangtao/Desktop/001.mp4 -vf &##34;movie=/Users/zhangfangtao/Desktop/fruit.jpg:sp=0[a];[in][a]overlay&##34; /Users/zhangfangtao/Desktop/test3.mp4

• 报错：