如何从Twilio MediaStreamTrack实时获取特定格式的音频数据？

Question

我正在使用Twilio可编程视频，并试图将远程参与者的音频实时传输到Google翻译客户端。

关于如何通过这里上的麦克风使用客户端，有一个示例代码。

我想要实现的是，我不想使用麦克风和node-record-lpcm16，而是想从Twilio的AudioTrack到客户端传输我所得到的信息。据这位医生称，

音轨表示房间内共享的单个音频、数据和视频媒体流。

此外，根据这位医生的说法，AudioTrack包含一个音频MediaStreamTrack。我猜这可以用来提取音频并将其输送到其他地方。

解决这个问题的最好方法是什么？

Answer 1

两位开发人员在这里传道。

使用MediaStreamTrack，您可以将其组合回MediaStream对象，然后将其传递给MediaRecorder。启动MediaRecorder时，它将接收dataavailable事件，这将是webm格式的音频块。然后，您可以将这些块输送到其他地方来进行翻译。我在MediaRecorder上写了一篇博客文章，这应该让您更好地了解MediaRecorder是如何工作的，但是您必须完成工作才能将音频块流到要翻译的服务器上。