三星实验室推出 MegaPortraits AI 换脸东西,可让蒙娜丽莎“动”起来

  IT之家8 月 6 日音讯,近来,三星实验室有一个名为 MegaPortraits 的新 AI 换脸东西在国外爆火,简略来说便是这款 AI 东西能够捕捉真人的脸部动作,让静态肖像能够仿照真人的表情、动作,让其“动”起来。<\/p>\n\n

  从 GIF 中咱们能够看到,一段视频就能够让本来静态的图片动起来,乃至还能展示出侧脸的概括,这些都是 MegaPortraits AI 换脸东西自行“脑补”出来的画面<\/font>,任何纤细的表情都能够“魂穿”到图片的人物傍边,似乎它本来便是一段视频相同,看不出漏洞。<\/p>\n\n

  这项技能的工作方式是将源图画与“驱动图画”的运动混合在一起,然后将“驱动图画”的运动嵌入到源图画中,每一帧生成运动的 AI 模型是从来自源图画和“驱动图画”的两个随机帧中练习出来的,这儿的“驱动图画”便是指上面两组 GIF 中最左边的真人。<\/p>\n

  “驱动图画”的外观及其运动在被投影到原始图画上之前由模型别离处理。在这项工作中,三星将神经头头像技能提升到百万像素分辨率,高分辨率头像的规划意图是不管真人看起来与图片中的形象相差大不大,都能够完成图片动态化,而不需求像其他 deepfake 软件需求的面部形状或肤色类似才干仿照。<\/p>\n\n

  所以即便利“驱动图画”的外观与源图画的外观有很大不一起,也能够使用中等分辨率的视频数据和高分辨率的图画数据来完成所需的烘托图画质量水平缓运动的改变。<\/p>\n\n

  MegaPortraits 研究人员解释道:“咱们的练习设置是相对规范的,咱们每一步从咱们的数据会集采样两个帧:源帧和驱动帧。咱们的模型将驱动帧的运动 (即头部姿态和面部表情) 强加到源帧的外观上,以发生输出后的图画。”<\/p>\n

  他们还表明:“首要的学习信号是从源帧和驱动帧来自同一视频的练习会集取得的,因而咱们的模型猜测经过练习以匹配驱动帧。”<\/p>\n

  IT之家了解到,MegaPortraits 研究人员表明,现在 MegaPortraits AI 换脸东西在膀子以及服装区域体现欠安,他们将来也会侧重改进这个问题。<\/p>\n\n\n\n\n\n\n\t\t\t\n\t\t\t\n\t\t\t\n\n\t\t\t\n\n\t\t\t\n\t\t\t\n\n\n\n\n\n\n\n\n\n\n\t\t\t\n\t\t\t\n\t\t\t\n\t\t\t\n