FFmpeg命令行音视频处理

2023-10-25  本文已影响0人  人月神话Lee

命令行工具

FFmpeg的bin目录下有三个工具，可在终端直接输入命令执行

ffmpeg命令

终端直接输入ffmpeg，可以获得用法提示

usage: ffmpeg [options] [[infile options] -i infile]... {[outfile options] outfile}...

Use -h to get full help or, even better, run 'man ffmpeg'

可以看到它有5个参数，简化一下就是：ffmpeg {1} {2} -i {3} {4} {5}，5个参数含义分别如下：

详细用法可以查阅官方文档，或者查阅man page，或者输入下面命令查阅说明：

部分参数解释：

查看设备

ffmpeg -devices

当前电脑输出的可用设备如下：

Devices:
 D. = Demuxing supported
 .E = Muxing supported
 --
  E audiotoolbox    AudioToolbox output device
 D  avfoundation    AVFoundation input device
 D  lavfi           Libavfilter virtual input device
  E sdl,sdl2        SDL2 output device
 D  x11grab         X11 screen capture, using XCB

在多媒体处理中，"demuxer"（解封装器）和"muxer"（封装器）是两个常用的概念，用于描述多媒体文件的解封装和封装操作。

1、Demuxer（解封装器） 是一个用于将多媒体文件（如音频或视频文件）解封装为原始音频流、视频流和其他相关数据的组件。它读取多媒体文件的容器格式（如MP4、AVI、MKV）并解析其中的音频、视频和其他流，将它们提供给后续处理的组件（如解码器）进行解码和处理。Demuxer将多媒体文件中的不同媒体流分离开来，以便进行独立的处理。

2、Muxer（封装器） 是一个用于将音频流、视频流和其他相关数据封装到容器格式中的组件。它接收来自解码器或其他处理组件的音频流、视频流等数据，并将它们合并到指定的容器格式中（如MP4、AVI、MKV），生成一个包含音视频数据的完整多媒体文件。Muxer负责将不同的音频和视频流合并，并添加必要的容器元数据和索引信息。

AVFoundation 对于iOS开发者来说再熟悉不过了，输入如下命令可以查看支持avfoundation支持的设备：

ffmpeg -f avfoundation -list_devices true -i ''

输出结果如下：

[AVFoundation indev @ 0x7fd0621043c0] AVFoundation video devices:
[AVFoundation indev @ 0x7fd0621043c0] [0] FaceTime HD Camera (Built-in)
[AVFoundation indev @ 0x7fd0621043c0] [1] Capture screen 0
[AVFoundation indev @ 0x7fd0621043c0] AVFoundation audio devices:
[AVFoundation indev @ 0x7fd0621043c0] [0] Built-in Microphone

对于Windows平台则是查看dshow（DirectShow）输入支持的设备：

ffmpeg -f dshow -list_devices true -i dummy

使用以下命令查看FFmpeg是否支持特定设备：

ffmpeg -sources DEVICE

其中，DEVICE是要查询的设备名称，例如alsa、pulse、v4l2等。

音频处理

1、录制音频
在Mac OS使用FFmpeg录制音频，可以使用如下命令：

ffmpeg -f avfoundation -i ":0" output.wav

这个命令使用了FFmpeg的avfoundation输入设备，从Mac的音频输入设备（通常是麦克风）录制音频。":0"参数表示默认的音频输入设备，output.wav是要保存音频的文件名和格式。可以将其更改为所需的文件名和扩展名。

执行命令后，FFmpeg将开始录制音频，并在后台显示进度信息。要停止录制，可以按下Ctrl+C。

2、查看音频信息

ffmpeg -i output.wav

输出结果如下：

Input #0, wav, from 'output.wav':
  Metadata:
    encoder         : Lavf60.3.100
  Duration: 00:00:19.56, bitrate: 1411 kb/s
  Stream #0:0: Audio: pcm_s16le ([1][0][0][0] / 0x0001), 44100 Hz, 2 channels, s16, 1411 kb/s

当然，该命令也可以查看视频文件信息，例如查看前几天在YouTube上下载的一个视频信息：

Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'test.mp4':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: isommp42
    creation_time   : 2023-10-13T02:00:12.000000Z
  Duration: 00:12:11.92, start: 0.000000, bitrate: 1134 kb/s
  Stream #0:0[0x1](und): Video: h264 (High) (avc1 / 0x31637661), yuv420p(tv, bt709, progressive), 1280x720 [SAR 1:1 DAR 16:9], 1003 kb/s, 30 fps, 30 tbr, 15360 tbn (default)
    Metadata:
      creation_time   : 2023-10-13T02:00:12.000000Z
      handler_name    : ISO Media file produced by Google Inc. Created on: 10/12/2023.
      vendor_id       : [0][0][0][0]
  Stream #0:1[0x2](eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, stereo, fltp, 128 kb/s (default)
    Metadata:
      creation_time   : 2023-10-13T02:00:12.000000Z
      handler_name    : ISO Media file produced by Google Inc. Created on: 10/12/2023.
      vendor_id       : [0][0][0][0]

3、提取音频

比如，从上面的test.mp4视频中提取音频：

ffmpeg -i test.mp4 -vn test.mp3

-vn表示去除视频流，处理信息如下：

Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'test.mp4':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: isommp42
    creation_time   : 2023-10-13T02:00:12.000000Z
  Duration: 00:12:11.92, start: 0.000000, bitrate: 1134 kb/s
  Stream #0:0[0x1](und): Video: h264 (High) (avc1 / 0x31637661), yuv420p(tv, bt709, progressive), 1280x720 [SAR 1:1 DAR 16:9], 1003 kb/s, 30 fps, 30 tbr, 15360 tbn (default)
    Metadata:
      creation_time   : 2023-10-13T02:00:12.000000Z
      handler_name    : ISO Media file produced by Google Inc. Created on: 10/12/2023.
      vendor_id       : [0][0][0][0]
  Stream #0:1[0x2](eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, stereo, fltp, 128 kb/s (default)
    Metadata:
      creation_time   : 2023-10-13T02:00:12.000000Z
      handler_name    : ISO Media file produced by Google Inc. Created on: 10/12/2023.
      vendor_id       : [0][0][0][0]
Stream mapping:
  Stream #0:1 -> #0:0 (aac (native) -> mp3 (libmp3lame))
Press [q] to stop, [?] for help
Output #0, mp3, to 'test.mp3':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: isommp42
    TSSE            : Lavf60.3.100
  Stream #0:0(eng): Audio: mp3, 44100 Hz, stereo, fltp (default)
    Metadata:
      creation_time   : 2023-10-13T02:00:12.000000Z
      handler_name    : ISO Media file produced by Google Inc. Created on: 10/12/2023.
      vendor_id       : [0][0][0][0]
      encoder         : Lavc60.3.100 libmp3lame
size=   11437kB time=00:12:11.89 bitrate= 128.0kbits/s speed=58.3x
video:0kB audio:11437kB subtitle:0kB other streams:0kB global headers:0kB muxing overhead: 0.002946%

4、转换音频格式

将上面的output.wav转换成output.mp3：

ffmpeg -i output.wav -c:a libmp3lame output.mp3

5、调整音频音量

将上面的output.mp3调成2倍音量并保存为output_dvolume.mp3：

ffmpeg -i output.mp3 -af "volume=2.0" output_dvolume.mp3

6、合并音频

将上面的output.mp3与output_dvolume.mp3两个音频文件合并成一个新的音频文件并保存merge_output.mp3：

ffmpeg -i output.mp3 -i output_dvolume.mp3 -filter_complex "[0:a][1:a]concat=n=2:v=0:a=1[out]" -map "[out]" merge_output.mp3

7、剪切音频

从输入文件test.mp3中剪切出从1分30秒到2分30秒的部分，并保存为test_cut.mp3：

ffmpeg -i test.mp3 -ss 00:01:30 -to 00:02:30 -c copy test_cut.mp3

-c copy表示不改变音频和视频的编码格式，直接拷贝，提升效率

8、添加音频效果

将对输入文件test_cut.mp3应用音频效果，包括加速2倍(atempo)、高通滤波器(highpass)和低通滤波器(lowpass)，并保存为test_cut_ahl.mp3：

ffmpeg -i test_cut.mp3 -af "atempo=2.0, highpass=f=200, lowpass=f=3000" test_cut_ahl.mp3

9、添加封面

ffmpeg -i test.mp3 -i test.jpeg -map 0 -map 1 -c copy -id3v2_version 3 -metadata:s:v title="Album cover" -metadata:s:v comment="Cover (Front)" test_cover.mp3

从test.mp3音频文件中提取音频流，并从test.jpeg图像文件中提取封面图像。然后，它将使用-map选项将音频流和封面图像流映射到输出文件。-c copy选项用于直接复制音频流和封面图像流，而不进行重新编码。-id3v2_version 3选项用于设置ID3标签版本为3，以确保兼容性。-metadata:s:v选项用于指定封面图像的元数据，如标题和注释。

添加封面后，文件变大了，这是意料之中的。下面的打印信息中也可表明标题和注释添加成功了。

Input #0, mp3, from 'test_cover.mp3':
  Metadata:
    major_brand     : mp42
    minor_version   : 0
    compatible_brands: isommp42
    encoder         : Lavf60.3.100
  Duration: 00:12:11.95, start: 0.025056, bitrate: 129 kb/s
  Stream #0:0: Audio: mp3, 44100 Hz, stereo, fltp, 128 kb/s
    Metadata:
      encoder         : Lavc60.3.
  Stream #0:1: Video: mjpeg (Baseline), yuvj420p(pc, bt470bg/unknown/unknown), 1024x1024 [SAR 96:96 DAR 1:1], 90k tbr, 90k tbn (attached pic)
    Metadata:
      title           : Album cover
      comment         : Cover (front)

视频处理

视频有很多跟音频类似的处理操作，这里只简单列举几种用法，更多用法需要时再查阅文档。

1、录制视频

ffmpeg -f avfoundation -i “1:0” out.avi

将视频设备1中的视频和音频设备0中的音频录制到out.avi

2、视频转码

ffmpeg -i out.avi out.mp4

将视频out.avi转为out.mp4

3、视频截图

ffmpeg -i out.mp4 -ss 00:00:10 -vframes 1 output.jpg

从上面的out.mp4中提取第10秒的视频帧，并将其保存为输出文件output.jpg。参数-vframes 1表示只提取一帧。

ffplay命令

其实，在上面音视频的处理过程中，经常用到了ffplay命令，以测试一部分音视频处理是否成功。相比ffmpeg命令，ffplay就简单多了。

ffplay [options] [input_url]

这个命令会打开一个窗口，并播放指定的输入文件。常用的参数：

也可以使用键盘上的一些快捷键进行控制，例如：

ffprobe命令

ffprobe是FFmpeg提供的一个命令行工具，用于分析媒体文件的详细信息。它可以提供音视频流的元数据、编解码器信息、时长、帧率等数据。语法如下：

ffprobe [options] input_url

常用的参数：

简单举个例子，ffprobe -show_format out.mp4，输出部分信息如下：

filename=out.mp4
nb_streams=2
nb_programs=0
format_name=mov,mp4,m4a,3gp,3g2,mj2
format_long_name=QuickTime / MOV
start_time=0.000000
duration=23.966667
size=18413363
bit_rate=6146324
probe_score=100
TAG:major_brand=isom
TAG:minor_version=512
TAG:compatible_brands=isomiso2avc1mp41
TAG:encoder=Lavf60.3.100

参考

1、官网文档
2、阮一峰FFmpeg视频处理入门教程
3、FFMPEG ENCODING AND EDITING COURSE

上一篇下一篇

猜你喜欢

热点阅读