我一直试图从ARSCNFaceGeometry中提取面部特征,例如嘴,以改变它们的颜色或添加不同的material,但没有成功。我知道我需要创建一个SCNGeometry,我有SCNGeometrySource,但是还不能创建SCNGeometryElement。已经尝试过用ARFaceAnchor在update(from faceGeometry: ARFaceGeometry)中创建它,但到目前为止一直无法实现。会真的很感激有人帮忙
发布于 2017-11-14 18:16:59
ARSCNFaceGeometry是一个单一的网格。如果您希望它的不同区域是不同的颜色,您最好的选择是应用一个纹理映射(在SceneKit中通过为材料属性内容提供图像来实现)。
没有与网格中的顶点相关的语义信息--也就是说,没有什么能说明“这一点是鼻尖,这些点是上唇的边缘,等等”。但是网状结构是稳定的,所以如果你创建一个纹理图像,在嘴唇周围加上一点颜色,或者在眼睛上加上闪电,它就会在脸部移动的时候停留在那里。
如果您需要帮助开始绘制纹理,您可以尝试以下几点:
首先创建一个虚拟纹理
制作一个正方形图像并用一个双梯度填充它,这样每个像素的红色和蓝色分量都是基于该像素的x和y坐标。或者其他一些与众不同的模式。将这个纹理应用到模型中,看看它的外观--纹理中的地标将指导你画到哪里。
导出模型
使用ARSCNFaceGeometry初始化器和一个空的blendShapes字典创建一个虚拟的blendShapes(您不需要一个活动的ARFaceTracking会话,但您确实需要iPhone X)。使用SceneKit的场景导出API(或Model I/O)将该模型写入某种类型的3D文件(.scn,您可以在Mac上进行进一步处理,或者类似于.obj)。
将该文件导入您最喜欢的3D建模工具(Blender、Maya等),并使用该工具绘制纹理。然后在你的应用程序中使用这个纹理,让你拥有真实的脸。
实际上,上面的内容有点过于简单化,尽管这是常见情况下的简单答案。如果使用ARSCNFaceGeometry初始化器创建init(device:fillMesh:),那么它实际上可以包含最多四个子网格。但即使如此,这些部分也不是在语义上标注的脸部区域--它们是常规人脸模型上的洞,是眼睛和嘴巴通过的地方的平填充。
https://stackoverflow.com/questions/47277914
复制相似问题