训练|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了

今年9月 , “就读”于清华大学的虚拟人华智冰公开了一条弹唱歌曲视频 , 引发网友讨论 。
这段38秒的视频中 , 一个女孩儿在抱着吉他弹唱 。 这段无比真实的画面上方字幕却显示 , 其中的女孩儿是个“虚拟人” 。

训练|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章图片

短视频截图
当时 , 许多网友惊讶于 , 虚拟人已经能做到如此真实了 。 不过此后有网友发现 , 这段弹唱视频还存在一个“真人版” 。 有网友进而质疑 , 虚拟人华智冰弹唱的视频只是对B站某up主真人拍摄视频进行了换脸 。
其中应用的技术只是“AI换脸”吗?除此之外视频中还有哪些前沿科技?这又和其他“虚拟偶像”的短视频有何不同?采访人员进行了采访调查 。
“华智冰”这三个字 , 作为虚拟人的名字出现在公众视野 , 是从今年6月开始的 。
6月1日 , 由北京智源人工智能研究院、智谱AI与小冰公司共同“培养”的人工智能学生华智冰 , 进入清华“学习” 。 当时公开的相关资料及视频就在社交媒体引起了网友热议 。

训练|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章图片

2021年6月公开的华智冰影像 。 智源大会供图
三个多月后 , 小冰团队公开了一段带有华智冰形象的弹唱视频 。
根据小冰公司发布的声明 , 在该视频中 , 人物的面部特征 , 包括人脸、表情、口型等 , 全部由人工智能小冰框架X Avatar生成并进行融合;视频中的人物肢体、动作 , 包括手持吉他弹唱 , 来源于小冰团队成员录制的原始视频模板;视频中的歌声 , 由人工智能小冰框架X Studio生成 。
不过 , 网上有人将其解读为仅仅是应用了“AI换脸”技术 。 在小冰团队看来 , 其中的技术与“AI换脸”有着本质区别 。
10月19日 , 小冰公司发布的说明指出 , 该视频隶属于小冰发布会中的超写实视频生产线产品 。 新的产品化技术实现了完全虚拟生成不存在的面部及声音技术 。
但华智冰也并非只是“换了个假脸” 。
这份说明同时指出 , 即使是视频中的面部置换 , 也并非仅仅AI换脸 。 以往的技术只能实现真实人类之间的面部替换 , 且精度不足 , 不足以实现内容级的视频生产 。 此外 , 采访人员了解到 , 该视频中的歌声也都是由人工智能“创作”生成的 。

训练|清华虚拟学生只是换了个假脸?你也太小瞧人工智能了
文章图片

华智冰正面照 。 小冰团队供图
那么 , 相比于我们平时在短视频平台刷到的有着“二次元风”的“虚拟偶像”作品 , 华智冰的这条短视频所应用的技术有何不同?

推荐阅读