DC-AE
https://gyazo.com/8384d1b206328ccfbc087214fed2d468
https://github.com/mit-han-lab/efficientvitmit-han-lab/efficientvit
https://arxiv.org/abs/2410.10733Deep Compression Autoencoder for Efficient High-Resolution Diffusion Models
SD-VAE等の従来のAEでは8倍程度しか圧縮出来ない上に、復元したときにかなり劣化する
Deep Compression Autoencoder(DC-AE)では圧縮率が32倍、64倍、128倍でも画質をキープしつつ処理できる
Residual Autoencoding
https://gyazo.com/246f2602507506c964ee60fc456ef2db
画像を圧縮するだけではなく、圧縮されたときの残差(residual)を学ぶ
エンコーダとデコーダにショートカットを追加し、エンコーダーが画像を縮めるときに、「元の情報の一部」を直接通すことで、復元を用意にする
U-netでも似たような話があったような無かったようなnomadoor.icon
Decoupled High-Resolution Adaptation
VAE