如何检测音频流中的基音异常？

Question

我需要从一个视频中提取音频流，并检查它是否有任何音高变化或异常。理想情况下，我们希望量化音频流中的任何音高变化。我知道我可以使用ffmpeg从视频中提取音频流。然而，哪些工具或程序(python?)然后可以用来识别和量化音频流中的任何音高变化或异常吗？

Answer 1

音高分析不是一件容易的事情，幸运的是，有现成的解决方案。https://pypi.org/project/crepe/是一个看上去很有前途的例子。

您可以将得到的音高数据的CSV读入Pandas数据，并执行任何您能想到的数据分析。

例如，对于音高变化的分析，您可以这样做。

df['pitch_change'] = df.frequency.diff(periods=1)

得到一个代表每个时间单位的音高变化的列。