与语音同步的人脸动画

Question

我正在开发一个交互式口语对话系统，在这个系统中，用户会对系统说些什么，系统会用语音回答他，并根据语音生成面部表情。但是，我不知道如何才能生成面部表情。谁能告诉我，我该如何开始，或者如果已经存在任何开源包，那就太好了。如果有人知道任何与此相关的开源软件，请告诉我。

Answer 1

此项目以及其他系统包含您所需的内容：

http://osdn.jp/projects/galatea

引用：

"Galatea“是一个提供开源、无许可证的软件工具包的项目，用于构建拟人化的口语对话代理。换句话说，使用这个工具包，您可以构建自己独特的、逼真的可视化代理，它可以通过口语

与您进行交流

Answer 2

你可以使用开源的HapFacs1.0 API，它提供了全面的、基于FACS的API来根据动作单元生成不同的面部表情。HapFacs API目前在windows平台上可用。基于Haptek软件开发的HapFacs。它还提供内置的嘴唇同步功能，并与大多数文本到语音转换引擎兼容。HapFacs1.0最初是用C#编写的，但是你可以通过在大多数开发平台上引用它的.dll文件来使用API。通过组合不同的动作单元，您可以生成不同强度的面部表情。通过使用EMFACS配置，您可以生成7种不同强度的通用面部表情。

Answer 3

你可以通过制作你的脸的视频来产生面部表情？就我个人而言，我想我会从这一点开始。