GAN 模态过渡

短发和长发过渡

现在我们有两个Image Domain X(短发)Y(长发)

pretrained GAN由随机向量生成图像,向量的各个维度代表着Image的各个特征

如果我们知道某(些)维度代表头发长短,通过调整这(些)维度,就可以调整头发的长短

因此我们需要对Images进行解码

GAN 模态过渡

 

 

Generator(Decoder):预训练好的,能将随机向量转换成对应的人脸

Encoder :固定Generator的参数,通过重建loss训练Encoder产生x对应的向量zx,因为只有zx才能够通过*生正确的x

Discriminator:训练Generator时的Discriminator,可以用来初始化Encoder的参数

GAN 模态过渡

 

 

对上述网络分别输入短发和长发的Images,可以分别得到其Vectors

对两个Domain的Vectors进行平均,并相减,便可得到Domain间的距离zlong

对特定图像x0,解得其编码En(x),加上n×zlong(n为变化参数),得到z',Gen(z')即目标图像y0

上一篇:Transformer模型学习笔记


下一篇:pytorch 多gpu运行