苹果公司隆重推出🫂HUGS:
Human Gaussian Splats - 能够在大约 30 分钟内从休闲视频(50-100 帧)创建可动画 (3DGS) 头像。创作者的化身可以轻松嵌入到其他(NeRF)场景中。
项目: https://machinelearning.apple.com/research/hugs
arXiv: https://arxiv.org/abs/2311.17910
HUGS 学习人类(在规范空间中)和场景的分离表示法,从而能够对场景中的人类化身进行编辑和制作动画。
HUGS 基于三维高斯拼接(3DGS)和 SMPL 人体模型来驱动三维人体高斯;并允许模型捕捉人体模型以外的细节,如服装。
HUGS 是与 @mkocab_ 、Rick Chang、James Gabriel 和 @OncelTuzel 合作完成的。 (from @anuragranj)