VQ-VAE — 向量量化变分自编码器

事实

用离散码本表示潜变量的生成式自编码器。

人话

VQ-VAE 像便利店扫码：不记每包零食细节，只存货号，回头按号补货复原。

用于图像语音生成，把连续信号压成离散码。

相关概念

• Variational Autoencoder（变分自编码器）
• 自编码器
• 生成模型（Generative Model）
• Representation Learning｜表征学习

VAE
VQ-VAE 把 VAE 的连续潜变量换成离散码本。

Autoencoder
它仍沿用先编码压缩、再解码重建的结构。

Generative Model
它学到的离散编码常被后续生成模型使用。

Representation Learning
它把图像、语音压成更容易建模的离散表示。