【问题标题】:ffmpeg audio - video sync issue (audio ahead of video) - while screen recording using x11grabffmpeg 音频 - 视频同步问题(音频先于视频) - 使用 x11grab 进行屏幕录制时
【发布时间】:2019-05-19 16:18:20
【问题描述】:

在使用以下 ffmpeg 选项进行屏幕录制时,我始终在视频之前获得音频,延迟大约为几秒​​p>

ffmpeg cmd:

ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 -video_size 1920x1080 -i :0 -f pulse -thread_queue_size 1024 -i default -c:v libx264 -threads 0 -preset faster -c:a flac -async 1 -vsync 1 -crf 30 -crf_max 33 -f matroska output.mkv

ffprobe 输出如下:

$ ffprobe demo.mkv 
ffprobe version 3.4.4-1~16.04.york0 Copyright (c) 2007-2018 the FFmpeg developers
  built with gcc 5.4.0 (Ubuntu 5.4.0-6ubuntu1~16.04.10) 20160609
  configuration: --prefix=/usr --extra-version='1~16.04.york0' --toolchain=hardened --libdir=/usr/lib/x86_64-linux-gnu --incdir=/usr/include/x86_64-linux-gnu --enable-gpl --disable-stripping --enable-avresample --enable-avisynth --enable-gnutls --enable-ladspa --enable-libass --enable-libbluray --enable-libbs2b --enable-libcaca --enable-libcdio --enable-libflite --enable-libfontconfig --enable-libfreetype --enable-libfribidi --enable-libgme --enable-libgsm --enable-libmp3lame --enable-libmysofa --enable-libopenjpeg --enable-libopenmpt --enable-libopus --enable-libpulse --enable-librubberband --enable-librsvg --enable-libshine --enable-libsnappy --enable-libsoxr --enable-libspeex --enable-libssh --enable-libtheora --enable-libtwolame --enable-libvorbis --enable-libvpx --enable-libwavpack --enable-libwebp --enable-libx265 --enable-libxml2 --enable-libxvid --enable-libzmq --enable-libzvbi --enable-omx --enable-openal --enable-opengl --enable-sdl2 --enable-libdc1394 --enable-libdrm --enable-libiec61883 --enable-chromaprint --enable-frei0r --enable-libopencv --enable-libx264 --enable-shared
  libavutil      55. 78.100 / 55. 78.100
  libavcodec     57.107.100 / 57.107.100
  libavformat    57. 83.100 / 57. 83.100
  libavdevice    57. 10.100 / 57. 10.100
  libavfilter     6.107.100 /  6.107.100
  libavresample   3.  7.  0 /  3.  7.  0
  libswscale      4.  8.100 /  4.  8.100
  libswresample   2.  9.100 /  2.  9.100
  libpostproc    54.  7.100 / 54.  7.100
Input #0, matroska,webm, from 'demo.mkv':
  Metadata:
    ENCODER         : Lavf57.71.100
  Duration: 01:00:31.93, start: 0.000000, bitrate: 416 kb/s
    Stream #0:0: Video: h264 (High), yuv420p(progressive), 1920x1080, 29.97 fps, 29.97 tbr, 1k tbn, 59.94 tbc (default)
    Metadata:
      ENCODER         : Lavc57.89.100 libx264
      DURATION        : 01:00:31.928000000
    Stream #0:1: Audio: flac, 48000 Hz, stereo, s16 (default)
    Metadata:
      ENCODER         : Lavc57.89.100 flac
      DURATION        : 01:00:30.912000000

我什至尝试过使用avoid_negative_ts 标志,但它对同步问题没有帮助。

操作系统:Ubuntu-18.04

ffmpeg 版本:3.4

更新:(使用 ffmpeg-4.0) 我已经把这个过程分成了两部分,并尝试如下所示(质量更好,但音频/视频同步仍然是一个问题)

# STEP-1: screen recording
/usr/bin/ffmpeg -y -f x11grab -thread_queue_size 1024 -draw_mouse 0 \
-video_size 1920x1080 -i :91141925 -f pulse -thread_queue_size 1024 \
-i virtual_sink.monitor -c:v libx264rgb -threads 0 -preset ultrafast \
-c:a flac -ac 1 -crf 0 -f matroska output.mkv

# STEP-2: audio/video encoding
/usr/bin/ffmpeg -y -i output.mkv -c:v libx264 -threads 0 \
-preset faster -pix_fmt yuv420p -c:a copy -ac 1 -crf 25 \
-f matroska final_output.mkv

STEP-1 在屏幕录制期间使用的 CPU 更少,但音频仍然领先于视频。我使用的显示器是xvfb STEP-1 中的一个(因为这是云端的无头机器)

另外,我在 STEP-1 中尝试了标志 -filter_complex aresample=44100 -vsync 1 无济于事。

有人可以帮忙吗!

更新 2:(来自 git master 的最新 ffmpeg)

成功了!感谢@llogan 提供的帮助。

【问题讨论】:

  • 你的 ffmpeg 太旧了。第一步是从 git master 分支尝试最新版本。你可以compiledownload(虽然我不确定静态版本是否支持脉冲)。
  • 我已尝试使用最新的 ffmpeg 4.0 版,但仍然是同样的问题。
  • 我的意思是使用来自 git master 分支的构建,而不是发布版本。
  • 感谢@llogan,它按照建议使用了来自 git master 的最新 ffmpeg 和 x264 版本。

标签: ubuntu ffmpeg pulseaudio screencast matroska


【解决方案1】:

我遇到了同样的问题(尽管在我的情况下,视频在音频之前)。只需按照on the Archlinux forum 的建议将-f pulse 切换为-f alsa,即可消除延迟。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2017-04-13
    • 1970-01-01
    • 2012-03-16
    • 2020-10-04
    • 2012-10-02
    • 1970-01-01
    • 2020-05-30
    • 1970-01-01
    相关资源
    最近更新 更多