Diffusion Transformer

بنية تجمع بين نماذج الانتشار (التي تتعلّم إزالة التشويش تدريجياً) والمحوِّلات (التي تستخدم آلية الانتباه الذاتي). تحلّ محل بنية U-Net التقليدية في نماذج الانتشار وتتميّز بقابلية توسيع أفضل.

An architecture combining diffusion models (which learn to gradually denoise) with transformers (which use self-attention). Replaces the traditional U-Net backbone in diffusion models with superior scaling properties.