KakaoBrain用新的FaceSwap技术为元宇宙带来了巨大的改进

导读 Kakao Brain 今天宣布开发其最新的用新元宇换脸技术Smooth-Swap，旨在通过增强身份嵌入来扩展平滑换脸的的改能力[1] . 在用集成的平滑身份嵌入器替...

Kakao Brain 今天宣布开发其最新的换脸技术“Smooth-Swap”，旨在通过增强身份嵌入来扩展平滑换脸的技巨大进能力[1] . 在用集成的平滑身份嵌入器替换现有系统的复杂外部模块后，该创新模型具有开创性的宙带简化架构，从而促进更快、用新元宇更稳定的的改人脸交换。

作为 Kakao Brain 换脸研究的技巨大进另一个重要里程碑，该公司的宙带“Smooth-Swap: A Simple Enhancement for Face-Swapping with Smoothness”论文将在即将召开的全球计算机视觉会议 CVPR 2022 [2]上发表，连续第二年。用新元宇这将包括为接受文章中最优秀的的改论文保留的独家口头报告会(今年接受了 8,161 篇论文中的 25.33%)。在去年的技巨大进活动中，只有 4% 的宙带被接受论文有时间进行口头报告，其中 Kakao Brain 因其出色的用新元宇研究论文“HOTR: End-to-End Human-Object Interaction Detection with Transformers”获得提名。今年，的改“Smooth-Swap”不仅架构的技巨大进复杂度显着降低，而且具有巨大的商业化潜力，都得到了首屈一指的计算机视觉会议的认可和奖励。

准确且一致的身份梯度[ 3]对于在不牺牲图像质量的情况下无缝更改一个人的身份至关重要。通过监督对比损失训练，“Smooth-Swap”通过学习具有更高平滑度的嵌入来获得其稳定的身份梯度。这些改进解决了早期模型添加手工组件和 3D 面部建模的弱点，这最终使其设计复杂化并需要复杂的超参数调整。相反，“Smooth-Swap”依赖于简单的基于 U-Net 的架构和集成的平滑身份嵌入器来提供尖端性能。

“Smooth-Swap”的简单架构和增强的性能不仅使其技术在商业化潜力和更广泛的应用方面具有竞争力，还使其能够面对更具挑战性的换脸场景，例如视频播放期间的换脸。“Smooth-Swap”提出了一种差异化的身份嵌入方法，并使生成器能够创建更高质量的图像，尤其是在改变对象的面部形状时。通过Kakao Brain的“Smooth-Swap”，可实现快速稳定的换脸，有望开发出各种数字人，如虚拟影响者、节目主持人和播音员。

Kakao Brain 首席执行官 Kim Il-doo 表示：“我们很自豪和兴奋地向全世界推出突破性的换脸技术‘Smooth-Swap’。“我坚信这项技术将加速换脸领域的创新，让我们更接近我们一直梦想的令人难以置信的沉浸式虚拟世界以及未来的数字人类服务。”