我正在努力构建一个web应用程序,让用户可以轻松地将文本(作为开放标题)和其他资产添加到我的应用程序中,作为实时覆盖到他们的YouTube实时流视频中。
他们将使用他们的相机记录他们的视频,并从我的应用程序中选择哪个文本应该添加到视频中。
然后,视频将通过他们的API实时发送到Youtube。
以下是我的问题:
首先,我想知道混合视频+字幕并将其发送到Youtube的rtmp url是否可以从客户端完成,所以它既简单又轻量级。
第二,我应该对发送到Youtube的输出进行编码吗?这也可以在浏览器上完成吗?我只看到了几个node.js框架,即使它们还不太成熟(或者Webcodecs是用于这个目的的吗?)对于这个任务来说,web应用程序是一个糟糕的选择吗?
最后,如果我确实需要一台服务器来处理视频,那么编码应该在哪里进行(从用户的机器,或者在服务器,或者两者都进行?)考虑到YouTube的基础设施,我的服务器最有可能成为瓶颈吗?因为视频文件很大,我的服务器也很有限吗?
我对视频流很陌生,所以请原谅我对这个话题缺乏理解。此外,如果有任何好的资源,我的问题,请与我分享。
发布于 2021-05-29 18:13:44
首先,我想知道混合视频+字幕并将其发送到Youtube的rtmp url是否可以从客户端完成,所以它简单而轻量级。
你可以做视频合成和音频混合什么的,但浏览器不支持RTMP。要将数据发送到RTMP服务器,需要将其发送到服务器,并将其代理到最终的URL。
他们将使用他们的相机录制他们的视频,并从我的应用程序中选择哪个文本应该添加到视频中。
是啊,一点问题都没有。把所有的东西都画到画布上,每一帧。
第二,我应该对发送到Youtube的输出进行编码吗?
是的,你必须。查看。
最后,如果我确实需要一台服务器来处理视频,那么编码应该在哪里进行(从用户的机器,或者在服务器,或者两者都进行?)
视频必须编码客户端才能到达服务器。然后服务器就可以用flv重新打包并发送出去了。如果浏览器在其Media中不支持H.264,那么您将有一个类似于VP8的中间编解码器,并且必须对服务器端进行代码转换。
几年前,我在这里写了一篇关于如何完成所有这些步骤的教程:https://github.com/fbsamples/Canvas-Streaming-Example注意到这个教程是在Facebook的背景下编写的,但是这应该会教你一些概念。
https://stackoverflow.com/questions/67745518
复制相似问题