如何从OpenAI的Whisper中根据我自己的培训数据完成一个模型？

Question

我使用OpenAI的低语 python来进行语音识别。我有一些训练数据:要么只有文本，要么音频+相应的转录。如何从OpenAI的Whisper中根据我自己的培训数据完成一个模型？

Answer 1

从这里，有一个代码从拥抱脸到微调OpenAI语音识别模型.但还没有测试

Answer 2

在https://github.com/openai/whisper/discussions/64中，发布的代码不包含培训/优化部分。因此，要想能够在我自己的培训数据上使用OpenAI的Whisper中的模型，就必须编写它。

同时，来自https://openai.com/blog/whisper/

我们是开源模型和推理代码，为构建有用的应用程序和进一步研究稳健的语音处理奠定了基础。

没有提到训练守则。