“官宣官宣了,我男朋友帅吧”。今天是520网络情人节,数万人在快手官宣脱单,这是怎么做到的?原来是快手上线了一款视频特效,让单身的小伙伴们瞬间甜蜜分身,“顺利脱单”。这是快手为用户准备的一系列520特效中的一款,受到用户欢迎。

“感谢快手送的男朋友,真帅!”,“听说两个人在一起久了会越长越像,我男朋友很像我啊”,“官宣官宣,公布对象”。这款“变情侣”上线后,快手用户玩出了各式花样分身,和对象同框一起比心,牵手,玩手指舞,还能同框喝奶茶。还有宝妈用这款特效给宝宝拍摄视频,瞬间可以喜提龙凤胎。

快手上线的520一系列魔表中还有“变男神”、“变女神”,能够实现变性别效果的特效。“变男神”让女性用户自己变身男神,欣赏变身后的帅气发型。“变女神”的特效让男性用户瞬间变身肤白貌美的女子。

如此好玩新奇的体验背后用到了什么高科技呢,据快手Y-tech的算法工程师介绍,该效果背后是核心技术是GAN,即生成对抗网络。在用户原有图像的基础上,利用GAN可以生成以假乱真的图像。要想实现手机端实时的性别变换效果,必须要解决以下三大核心问题。

GAN生成的脸部特征与用户的性别明显相反,要有变性别的特征同时要和用户本身很像,GAN模型需要在改变性别特征与保留用户特征之间取得一个平衡。为了达到生成发型的拍摄稳定连续,快手Y-tech算法工程师将GAN与图形学结合在一起,充分利用了图形学中的3D理论与GAN的纹理学习能力。最终的效果给用户带来了新奇惊艳的体验。

GAN模型一般运算量较大,快手用户覆盖较广泛,使用的不同型号的手机运算能力差别很大。为了能够让所有用户都体验到新技术带来的福利,快手Y-tech采用了一个系统化的解决方案,从底层引擎的加速到模型压缩,再到后处理的优化,每一部分都暗含了相当大的挑战和能力。

除了性别变化, 快手Y-tech在其他生成式技术也做了丰富的积累, 比如变年轻、变老。2019年8月份,快手上线了“变娃娃脸”特效, 这次不仅是国内首个实现端上实时GAN,也是全球范围内第一次实现iOS安卓多平台、全机型覆盖的视频实时GAN。