首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >从ARSCNFaceGeometry中提取人脸特征

问从ARSCNFaceGeometry中提取人脸特征
EN

Stack Overflow用户
提问于 2017-11-14 04:53:49
回答 1查看 2.2K关注 0票数 6

我一直试图从ARSCNFaceGeometry中提取面部特征,例如嘴,以改变它们的颜色或添加不同的material,但没有成功。我知道我需要创建一个SCNGeometry,我有SCNGeometrySource,但是还不能创建SCNGeometryElement。已经尝试过用ARFaceAnchor在update(from faceGeometry: ARFaceGeometry)中创建它,但到目前为止一直无法实现。会真的很感激有人帮忙

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2017-11-14 18:16:59

ARSCNFaceGeometry是一个单一的网格。如果您希望它的不同区域是不同的颜色,您最好的选择是应用一个纹理映射(在SceneKit中通过为材料属性内容提供图像来实现)。

没有与网格中的顶点相关的语义信息--也就是说,没有什么能说明“这一点是鼻尖,这些点是上唇的边缘,等等”。但是网状结构是稳定的,所以如果你创建一个纹理图像,在嘴唇周围加上一点颜色,或者在眼睛上加上闪电,它就会在脸部移动的时候停留在那里。

如果您需要帮助开始绘制纹理,您可以尝试以下几点:

首先创建一个虚拟纹理

制作一个正方形图像并用一个双梯度填充它,这样每个像素的红色和蓝色分量都是基于该像素的x和y坐标。或者其他一些与众不同的模式。将这个纹理应用到模型中,看看它的外观--纹理中的地标将指导你画到哪里。

导出模型

使用ARSCNFaceGeometry初始化器和一个空的blendShapes字典创建一个虚拟的blendShapes(您不需要一个活动的ARFaceTracking会话,但您确实需要iPhone X)。使用SceneKit的场景导出API(或Model I/O)将该模型写入某种类型的3D文件(.scn,您可以在Mac上进行进一步处理,或者类似于.obj)。

将该文件导入您最喜欢的3D建模工具(Blender、Maya等),并使用该工具绘制纹理。然后在你的应用程序中使用这个纹理,让你拥有真实的脸。

实际上,上面的内容有点过于简单化,尽管这是常见情况下的简单答案。如果使用ARSCNFaceGeometry初始化器创建init(device:fillMesh:),那么它实际上可以包含最多四个子网格。但即使如此,这些部分也不是在语义上标注的脸部区域--它们是常规人脸模型上的洞,是眼睛和嘴巴通过的地方的平填充。

票数 10
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/47277914

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档