与传统的人工智能换脸技术不同,E4S更加精细和高级。它不仅能让你在照片或视频中换脸,还能确保换出来的脸在形状、纹理和光照方面都非常自然和逼真。
工作原理:
1.分离形状和纹理:根据一种叫区域GAN反演(Regional GAN Inversion,RGI)的技术,分离图像或视频中的特定区域的形状和纹理信息(比如皮肤的颜色、痣或者皱纹等)分开来处理。
2.多层面的处理:E4S用一个预先训练的模型(StyleGAN)作为其基础。它采用了一独特的编码器,这一编码器有能力识别并单独处理脸部的不同部分,如眼睛、嘴巴等。
3.样式和掩码交换:通过这种分离和多层次的处理方法,实现换脸变得更加直观和容易。简而言之,就是将一个人脸的形状和纹理信息“复制”并巧妙地“粘贴”到另一个人脸上。
4.光照调整:由于不同照片的光照条件可能不同,E4S还配备了一个“光照调整网络”,用于校正光照,从而使换脸后的结果看起来更加自然。
5、后处理修复:最后,如果在换脸过程中出现了一些小瑕疵,E4S还提供了一个“面部修复网络”,用于微调和修正这些细节。