python - 如何在 Linux 上使用音频流在 python 中读取视频文件？

Question

我正在寻找一种方法，如何使用 python 从视频文件中提取视频帧和相应的音频片段。
我很了解opencv。但它只允许提取视频帧。没有提供音频。
我需要两者 - 彼此完全对应的视频帧和音频片段。

将非常感谢任何提示:)

Answer 1

终于找到了moviepy https://pypi.python.org/pypi/moviepy它实现了ffmpeg的light wrapper，并提供了快速获取同时位置的视频和音频帧的接口(interface)。您可能会在下面找到示例:

from moviepy.editor import *

video = VideoFileClip('your video filename')
audio = video.audio
duration = video.duration # == audio.duration, presented in seconds, float
#note video.fps != audio.fps
step = 0.1
for t in range(int(duration / step)): # runs through audio/video frames obtaining them by timestamp with step 100 msec
    t = t * step
    if t > audio.duration or t > video.duration: break
    audio_frame = audio.get_frame(t) #numpy array representing mono/stereo values
    video_frame = video.get_frame(t) #numpy array representing RGB/gray frame

除了提取 a/v 帧之外，moviepy 还为音频/视频剪辑修改提供了广泛的功能范围。