Meta的Codec Avatars可通过iPhone扫描生

日期:2022-06-14 19:28:27 / 人气:253

cebook于2019年3月初次展现了超逼真头像Codec Avatars的消费进程,其由多个神经网络提供支持,可以由带有五个摄像头的原型VR头显实时驱动。从那时起,研讨人员展现了该零碎的几次演化,例如更逼真的眼睛、只需求眼部跟踪和麦克风输出的版本,以及最近接近完全真实感的2.0版本。事先生成一个独自的Codec Avatar需求用到一个名爲MUGSY的公用捕获设备和171个高分辨率摄像机。但Meta的最新研讨解脱了这一限制,可以经过带有前置深度传感器的智能手机(例如任何带有FaceID的iPhone)扫描生成Avatar。据引见,用户首先需求将手机平移到脸部四周,然后依照引导做出65种面部表情举措。研讨人员宣称,这个扫描进程均匀需求3分半钟,不过在一台装备四个高端GPU的机器上停止渲染,实践生成完好Avatar需求6个小时。假如部署在商品中,此步骤能够会发作在云GPU上,而不是用户的设备上。那麼,已经需求100多个摄像头才干完成,如今怎样能够只需求一部手机呢?窍门就在于运用一个名爲“hypernetwork”的通用先验模型,这是一种爲另一个神经网络生成权重的神经网络。研讨人员经过运用先进的捕获设备(相似于MUGSY,但运用90个摄像头)扫描255个不同集体的面部来训练这个UPM超网络。虽然其他研讨人员曾经展现了经过智能手机扫描生成Avatar头像,但Meta宣称其后果的质量是最先进的。但是,目前零碎只能用于处置面部,眼镜或长发等特征还无法很棒复原。当然,要到达这种商品交付的保真度,Meta还有很长的路要走。明天的Meta Avatars具有根本的卡通艺术作风,其真实性实践上随着工夫的推移而降低,能够更合适Horizon Worlds等使用顺序中具有复杂环境的大型群体。但是,Codec Avatars最终能够会成爲一个独自的选项,而不是对当今卡通化身的间接更新。在承受采访时,Meta首席执行官马克扎克伯格描绘了一个将来:将来人们能够会在游戏中运用表现主义(卡通)化身,而在打工会议中运用理想主义化身。

作者:盛煌娱乐平台




现在致电 5243865 OR 查看更多联系方式 →

COPYRIGHT 盛煌娱乐 版权所有