FFmpeg命令行工具学习(四)：FFmpeg 采集设备

时间：2021-09-29 17:13:50

在使用 FFmpeg 作为编码器时，可以使用FFmpeg采集本地的音视频采集设备的数据，然后进行编码、封装、传输等操作。

例如，我们可以采集摄像头的图像作为视频，采集麦克风的数据作为音频，然后对采集的音视频数据进行编码，最后将编码后的数据封装成多媒体文件或者作为音视频流发送到服务器上（流媒体）。

出于硬件环境和篇幅的限制，本文主要讲的时Mac平台下通过FFmpeg采集的方法和步骤。通常Mac上采集数据主要使用的是avfoundation进行采集。

一、Mac 下查看设备列表

FFmpeg可以直接从Mac系统的采集设备中采集摄像头、桌面、麦克风等。在采集设备之前，我们需要知道当前系统都支持哪些设备。

在终端上输入以下命令行，即可查看当前系统支持的设备基本信息：

ffmpeg -devices

输出如下：

Devices:

 D. = Demuxing supported

 .E = Muxing supported

 --

 D  avfoundation    AVFoundation input device

 D  lavfi           Libavfilter virtual input device

从输出内容中可以看到，通过ffmpeg -devices查看的信息分为两大部分：

  • 解封装或封装的支持情况
  • 设备列表

系统当前可以支持的设备具体如下：

  • 输出设备：avfoundation、lavfi

本文重点介绍设备avfoundation。下面我们先看一下avfoundation的参数。

在终端上输入命令行，可以查看avfoundation的参数：

ffmpeg -h demuxer=avfoundation

输出如下：

Demuxer avfoundation [AVFoundation input device]:

AVFoundation input device AVOptions:

  -list_devices      <int>        .D...... list available devices (from  to ) (default false)

     true                         .D......

     false                        .D......

  -video_device_index <int>        .D...... select video device by index for devices with same name (starts at ) (from - to INT_MAX) (default -)

  -audio_device_index <int>        .D...... select audio device by index for devices with same name (starts at ) (from - to INT_MAX) (default -)

  -pixel_format      <pix_fmt>    .D...... set pixel format (default yuv420p)

  -framerate         <video_rate> .D...... set frame rate (default "ntsc")

  -video_size        <image_size> .D...... set video size

  -capture_cursor    <int>        .D...... capture the screen cursor (from  to ) (default )

  -capture_mouse_clicks <int>        .D...... capture the screen mouse clicks (from  to ) (default )

FFmpeg对avfoundation设备操作可以使用的参数已经列举在上面了，主要涉及枚举设备、音视频设备编号、像素格式、帧率、图像分辨率等，接下来，我们来讲解一下这些参数使用的例子。

二、Mac 下查看采集设备列表

在使用avfoundation操作设备采集之前，需要枚举avfoundation支持的输入设备，可以通过以下命令行来进行查看：

ffmpeg -f avfoundation -list_devices true -i "" 

执行命令后，输入如下：

[AVFoundation input device @ 0x7feb49c04040] AVFoundation video devices:

[AVFoundation input device @ 0x7feb49c04040] [] FaceTime HD Camera

[AVFoundation input device @ 0x7feb49c04040] [] Capture screen

[AVFoundation input device @ 0x7feb49c04040] AVFoundation audio devices:

[AVFoundation input device @ 0x7feb49c04040] [] Built-in Microphone

从输出的信息可以看到，当前系统包含了三个设备，分别是：

视频输入设备：

  • [0] FaceTime HD Camera
  • [1] Capture screen 0

音频输入设备：

  • [0] Built-in Microphone

三、Mac 下采集设备

1、采集内置摄像头

执行以下命令可以直接获得摄像头并将摄像头内容录制下来或者直播推出去，以下命令就是采集命令行：

ffmpeg -f avfoundation -s 1280x720 -r  -i  out.mp4

执行命令后，会生成out.mp4视频文件，播放out.mp4就能看到FFmpeg从电脑摄像头采集到的图像：

ffplay out.mp4

2、采集Mac桌面

执行以下命令，就可以采集到桌面图像：

ffmpeg -f avfoundation -i  -r  out.yuv

命令执行后，就会录制桌面的画面为out.yuv，然后我们播放以下，就可以看到录制的效果了。

如果需要录制下来鼠标，则可以修改命令，增加capture_cursor来指定：

ffmpeg -f avfoundation -capture_cursor  -i  -r  out.yuv

播放的时候可以使用以下类型的命令行，来检测之前的录制是否成功：

ffplay -s 3360x2100 -pix_fmt uyvy422 out.yuv

其中，-s的参数，需要根据自己的电脑的状态来调整。-pix_fmt的参数，根据录制时的格式输出来调整。

3、采集麦克风

我们使用ffmpeg除了可以获得头像之外，还可以获得音频数据，命令如下：

ffmpeg -f avfoundation -i : out.wav

如果需要同时录制音视频，那么可以使用如下命令行：

ffmpeg -f avfoundation -video_device_index  -r  -s 1280x720  -i : out.mp4

注意：采集摄像头或者桌面，只需要改一下index的值就可以。

相关文章