From RGB Generation to Dense Field Readout: Pixel-Space Dense Prediction with Text-to-Image Models
Pretrained diffusion transformers can be adapted for dense prediction tasks by mapping tokens to task-native outputs instead of generating RGB images, achieving state-of-the-art re…
Hugging Face · Daily Papers
·Zanyi Wang, Xin Lin
·
·▲ 12 upvotes
Este artigo está em destaque na seleção diária de papers do Hugging Face, curada pela comunidade de pesquisa em IA.
Autores: Zanyi Wang, Xin Lin, Haodong Li, Dengyang Jiang, Yijiang Li
- 12 upvotes da comunidade
- Temas: text-to-image models, dense prediction, VAE latent space, DiT, task LoRA, token-local linear head
Resumo
Resumo original (em inglês), extraído do paper:
Pretrained diffusion transformers can be adapted for dense prediction tasks by mapping tokens to task-native outputs instead of generating RGB images, achieving state-of-the-art results with minimal additional parameters.Onde ler
// relacionados
Leia também
Editorial
EditBridge: edição de imagem em 4K sem inventar o que não estava lá
Blog
Coarse-to-Fine Multi-Resolution Diffusion Models for Trajectory Generation in Urban Systems
Blog
DiSCO: Defending text-to-image generation through distribution-guided contrastive prompt optimization
Blog