三星实验室推出MegaPortraitsAI工具，可让“蒙娜丽莎”动起来
<p id="4f5401b5-920f-49f1-82c0-966416d3eec2" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">IT之家8 月 6 日消息，近日，三星实验室有一个名为 MegaPortraits 的新 AI 换脸工具在国外爆火，简单来说就是这款 AI 工具可以捕捉真人的脸部动作，让静态肖像可以模仿真人的表情、动作，让其动起来。</p><p id="e1453576-5f87-4fe0-9bf2-faf123d19f0c" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;"><img src="https://p3-sign.toutiaoimg.com/tos-cn-i-qvj2lq49k0/69b4169d49c443c48b9596ba30129fc0~noop.image?_iz=58558&from=article.pc_detail&x-expires=1660566080&x-signature=cnfSYzZel9uW5XBil5wrBWwzy2s%3D" style="width:100%;"></p><p id="297b7dc0-6d53-40e4-a3f5-a7775ecc62b9" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">从 GIF 中我们可以看到，一段视频就可以让原本静态的图片动起来，甚至还能展示出侧脸的轮廓，<span id="e4e77e8e-0a5d-452c-8b64-896cbe362a8c" style="font-size:18px;margin:20px 0px;text-align:left;">这些都是 MegaPortraits AI 换脸工具自行脑补出来的画面</span>，任何细微的表情都可以魂穿到图片的人物当中，仿佛它原本就是一段视频一样，看不出破绽。</p><p id="a2715110-ed6a-4120-98c9-61a9933f5287" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;"><img src="https://p3-sign.toutiaoimg.com/tos-cn-i-qvj2lq49k0/bebbf5627f084021b0c2b3e10a4a8634~noop.image?_iz=58558&from=article.pc_detail&x-expires=1660566080&x-signature=waSBqJhJERwUDX0fdVVL3zR%2FuCY%3D" style="width:100%;"></p><p id="226373eb-ab49-4db8-8493-d35f4baf8d67" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">这项技术的工作方式是将源图像与驱动图像的运动混合在一起，然后将驱动图像的运动嵌入到源图像中，每一帧生成运动的 AI 模型是从来自源图像和驱动图像的两个随机帧中训练出来的，这里的驱动图像就是指上面两组 GIF 中最左侧的真人。</p><p id="d919616a-4be1-4c03-9c0a-10ec6e9c17e5" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">驱动图像的外观及其运动在被投影到原始图像上之前由模型分别处理。在这项工作中，三星将神经头头像技术提升到百万像素分辨率，高分辨率头像的设计目的是无论真人看起来与图片中的形象相差大不大，都可以实现图片动态化，而不需要像其他 deepfake 软件需要的面部形状或肤色相似才能模仿。</p><p id="1dae1944-3087-412e-9131-6f3427ed1e7a" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;"><img src="https://p3-sign.toutiaoimg.com/tos-cn-i-qvj2lq49k0/9c811445a0ad42ccab9f54bbb9bf2804~noop.image?_iz=58558&from=article.pc_detail&x-expires=1660566080&x-signature=L%2FVaOjLuU1vNictnknhFffUHNJ8%3D" style="width:100%;"></p><p id="a185bbda-79db-4372-a441-f25c0ad744db" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">所以即便当驱动图像的外观与源图像的外观有很大不同时，也可以利用中等分辨率的视频数据和高分辨率的图像数据来实现所需的渲染图像质量水平和运动的变化。</p><p id="94b57633-c569-4ac4-ae8c-aa07511adfc5" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;"><img src="https://p3-sign.toutiaoimg.com/tos-cn-i-qvj2lq49k0/5a973c1ba427445999e7eb854e27bd41~noop.image?_iz=58558&from=article.pc_detail&x-expires=1660566080&x-signature=Zq1%2BcNKfg87hey%2FpPbXdAeEdB%2FM%3D" style="width:100%;"></p><p id="929a6627-0771-4ad2-88a1-98c45a960731" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">MegaPortraits 研究人员解释道：我们的训练设置是相对标准的，我们每一步从我们的数据集中采样两个帧：源帧和驱动帧。我们的模型将驱动帧的运动 (即头部姿势和面部表情) 强加到源帧的外观上，以产生输出后的图像。</p><p id="a4fe35a4-c9b8-4177-bb43-395780916a08" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">他们还表示：主要的学习信号是从源帧和驱动帧来自同一视频的训练集中获得的，因此我们的模型预测经过训练以匹配驱动帧。</p><p id="b4f24871-cd36-4d4e-97e3-b3d1e32c166c" style="font-weight:400;text-align:left;line-height:1.667;margin:20px 0px;font-size:18px;">IT之家了解到，MegaPortraits 研究人员表示，目前 MegaPortraitsAI 换脸工具在肩膀以及服装区域表现不佳，他们将来也会着重改善这个问题。</p>
页:
[1]