Hasło słownika
Latent Diffusion Transformer
Klasa modeli generatywnych łącząca dyfuzję w przestrzeni latentnej z architekturą Transformer jako siecią odszumiającą.
AIkategoria
3aliasy
LDT latent diffusion transformer diffusion transformer in latent space
Opis
Warianty LDT próbują wziąć zalety latent diffusion (wydajność obliczeniowa) i Transformerów (modelowanie zależności dalekiego zasięgu). Termin bywa używany szeroko, ale często pojawia się w kontekście generacji obrazów i wideo.
Przykłady
- Model generuje obraz przez iteracyjne odszumianie w przestrzeni latentnej, a 'sercem' jest Transformer.
- W publikacji LDT ma poprawiać spójność detali w porównaniu do klasycznych U-Netów.