课程大纲 第 174 课,共 246 课 · 第 15 模块:压缩、重建、生成(自编码器与 VAE)
第 15 模块:压缩、重建、生成(自编码器与 VAE)

从一个数字走到另一个数字

为什么重要 如果编码空间没有空隙,两个编码之间的直线应该一路穿过都是数字的图片。这是对拉力 2 换来了什么的直接检验,也是你在图像生成器里见过的每一种“变形”的基础。

取两个测试数字 a 和 b。它们的编码是 mu_a 和 mu_b。一次潜空间行走会在 t 从 0 到 1 时解码点 mu_a + t (mu_b - mu_a)。把它和显而易见的另一种做法比较,也就是像素上的交叉淡化:(1 - t) a + t b,它只是把两种墨水混在一起。

看这个场景:同一段行走用两种方式画出来,一帧一帧,每一帧旁边都标着它到最近一个真实数字的接近度。

然后在许多对上测量它,而不是一对:取 200 对不同的数字,评判每种方法的中点(t = 0.5)。

本课中的词语和符号
编码(潜变量)
编码器从一张图片中得到的那少数几个数字
VAE
变分自编码器:一种编码被拉去填满 N(0, 1) 的自编码器,这样随机的编码就能解码成新的图片
mu、logvar
在 VAE 中,一个编码数字的中心,以及它离散程度平方的对数
接近度、多样性
课程的评判:到最近一个真实数字的距离,以及在十个数字上分布的比特数
潜空间行走
解码两个编码之间直线上的点
轮到你了

编写 walk(model, a, b, steps),返回 steps 张穿过编码空间从 a 到 b 的图片(第一张和最后一张是 a 和 b 的编码解码出来的图片)。然后用 VAE 行走和交叉淡化的 200 张中点图片的接近度填写 halfway。

发现这节课有问题?报告它 · 就这节课提问

这个练习即将开放

完成它前面的那一课,这一课就会解锁。整门课程免费,无需账号,而且你现在就可以阅读这节课。