AI生成可以实时互动的3D虚拟人，质量史诗级提升！

前面多篇文章都提到我们团队一直在尝试用各种AI工具来完成3D虚拟人实时互动的工作，力求跳过3D建模环节，让每个人都用得起专属于自己的3D虚拟人。但之前尝试的方法生成的模型质量都无法满足客户的要求，最近我们团队跟两大AI+3D平台深入合作后，不限积分地尝试迭代，进一步提升了3D虚拟人的质量。

1. Lovart生成符合要求的人物照片

我们在之前生成的12生肖图上继续改进。在图片生成3D模型之前，我们需要让人物图片满足：

• 1. 展开嘴巴微微笑： 这样保证在生成模型的时候不用刻意去建模软件里打开嘴巴，而且最好里面有一些牙齿和舌头的颜色，不然生成的里面黑黑的影响效果。
• 2. 标准T-POSE： 方便骨骼绑定。
• 3. 部件分离：我们将发饰、头部、服装、手臂、腿脚分别分离开，单独给每个部位生成模型质量要比一起生成效果好很多。

对比之后，最后我们选择在GPT里分离部件效果可以达到要求。

2. 用Rodin AI的Hyper 3D 完成图生成8K贴图的3D模型：

https://hyper3d.ai/

我们先尝试用上面整个人物形象的图片生成3D模型：

虽然Rodin的模型分离功能非常好，但如果是整张图片的话，即使选8K贴图，如果看细节的话还是感觉很模糊。眼珠部分塌陷，嘴巴也不是很好看。

于是我们用分离的照片一个个来生成。

制作人物头部

先看头部，这个8K贴图的效果已经很好了，眼珠嘴巴也非常接近真实建模了。

这里有一个注意事项要说一下，导出的时候有两个选项，一个是shaded，一个是pbr。我们都导出后对比一下效果，左边是 shaded,右边是pbr。

它们的区别如下：

制作人物头发

这里我们用Rodin中手动分离mesh的方法，方便我们用代码单独给这两只角添加发光材质。

这里有个参数De-light：去除贴图中已经烘焙进去的光照信息。

制作人物铠甲

生成正反面图

把宝石单独提取出来：

制作人物手臂和腿脚

在Blender中进行拼合：

看看它的布线：

还算比较规整，方便做绑定动画。然后我们在Blender中欣赏一下这个8K贴图。

自动绑定一下：

绑定完成，眼睛和嘴巴调整起来也非常流畅。

我们导出GLB后，在网页中用threejs渲染一下看看效果：

我觉得这个效果是目前最好的，整个过程都由AI完成，花不到半天时间就可以完成一个20万面8K贴图的3D人物形象。整个过程非常需要一个无限画布的功能来实现：

写在最后

这套方法是目前探索到的最佳AI生成3D人物的方法，自此以后我们的3D数字人将彻底摆脱对建模师的依赖，一个人就可以完成人物形象的制作、绑定和动画。

卡通人物和写实人物的操作流程是一样的，等明天完成后再弄一个真人的形象。有这方面定制需求的欢迎评论区咨询我们。

预告：

明天的文章分享AI完成3D人物动画制作的过程，以及任何通过嘴型驱动来跟3D数字人对话，会给这个人物配一个武器来舞动，更多好玩玩法尽情期待。

关于作者

做一只爬的最久的乌龟，保持学习保持好奇，即使慢一点，遇到一点困难，只要最后能到达终点，又有什么关系呢。

毕竟人生没有白走的路，每一步都算数。