Um Framework Texto-para-3D para Geração Conjunta de Humanos Prontos para CG e Roupas Compatíveis

Criar avatares humanos 3D detalhados com roupas ajustadas tradicionalmente requer expertise especializada e fluxos de trabalho intensivos em mão-de-obra. Embora avanços recentes em IA generativa tenham possibilitado síntese texto-para-3D de humanos e roupas, métodos existentes não oferecem pipelines acessíveis e integrados para gerar avatares 3D prontos para CG com roupas fisicamente compatíveis; aqui usamos o termo pronto para CG para modelos seguindo uma estética técnica comum em computação gráfica (CG) e adotamos representações padrão em CG de malhas poligonais e fios (em vez de representações de campo de radiância como NeRF e 3DGS) que podem ser diretamente integradas em pipelines convencionais de CG e suportam tarefas subsequentes como simulação física. Para preencher essa lacuna, introduzimos Tailor, um framework integrado texto-para-3D que gera avatares 3D personalizáveis e de alta fidelidade vestidos com roupas prontas para simulação. Tailor consiste em três etapas. (1) Análise Semântica: empregamos um grande modelo de linguagem para interpretar descrições textuais e traduzi-las em avatares humanos parametrizados e templates de roupas semanticamente compatíveis. (2) Geração de Roupas Sensível à Geometria: propomos deformação que preserva topologia com novas perdas geométricas para gerar roupas alinhadas ao corpo sob controle textual. (3) Síntese Textural Consistente: propomos um novo processo de difusão multi-visão otimizado para texturização de roupas, que impõe consistência de vistas, preserva detalhes fotorrealistas e opcionalmente suporta geração de texturas simétricas comuns em roupas. Através de avaliações quantitativas e qualitativas abrangentes, demonstramos que Tailor supera métodos de estado da arte em fidelidade, usabilidade e diversidade.