Resumen - Ultra3D: Generación de 3D Eficiente y de Alta Fidelidad con Atención a las Partes

Ultra3D: Generación de 3D Eficiente y de Alta Fidelidad con Atención a las Partes

2025-07-23 17:57:16

{"Yiwen Chen","Zhihao Li","Yikai Wang","Hu Zhang","Qin Li","Chi Zhang","Guosheng Lin"}

{cs.CV,cs.AI}

U LTRA 3D es un framework de generación de 3D eficiente y de alta calidad diseñado para superar las ineficiencias computacionales de los métodos de generación de 3D basados en voxels dispersos existentes. Logra esto aprovechando una pipeline de dos etapas y introduciendo varias innovaciones clave: **Pipeline de Dos Etapas**: 1. **Generación de Malla gruesa**: En lugar de predecir directamente las coordenadas de los voxels dispersos, U LTRA 3D primero genera una malla gruesa utilizando la representación compacta de VecSet. Este enfoque es eficiente en términos computacionales y permite la generación de mallas de alta resolución en pocos segundos. 2. **Refinamiento de Voxel dispersos**: La malla gruesa se voxeliza en voxels dispersos, que se refinan posteriormente utilizando un VAE 3D disperso y un DiT con Atención de Parte. **Innovaciones Clave**: 1. **Representación de VecSet**: El uso de VecSet permite la generación eficiente de mallas gruesas, reduciendo significativamente el costo computacional en comparación con la predicción directa de las coordenadas de los voxels dispersos. 2. **Atención de Parte**: Este mecanismo de atención localizada restringe la computación de atención a regiones de parte semánticamente consistentes, preservando la continuidad estructural y alcanzando un aceleramiento de hasta 6.7× en la generación latente sin comprometer la calidad. 3. **Pipeline de Anotación de Parte Escalable**: Esta pipeline convierte eficientemente mallas raw en voxels dispersos etiquetados con partes, permitiendo anotaciones de alta calidad a escala. **Beneficios**: - **Alta Eficiencia**: U LTRA 3D reduce significativamente el costo computacional en comparación con los métodos existentes, permitiendo la generación de modelos 3D de alta resolución en una fracción del tiempo. - **Alta Calidad**: La combinación de VecSet y Atención de Parte asegura alta fidelidad visual y precisión geométrica. - **Escalabilidad**: El pipeline de anotación de parte escalable permite la anotación eficiente de conjuntos de datos a gran escala. **Aplicaciones**: U LTRA 3D tiene el potencial de revolucionar diversas aplicaciones, incluyendo: - **Modelado 3D**: Generación eficiente de modelos 3D de alta resolución para su uso en videojuegos, realidad virtual y otras industrias. - **Diseño**: Permite a los diseñadores crear y modificar rápidamente modelos 3D. - **Educación**: Proporciona a los estudiantes una herramienta para visualizar conceptos 3D complejos. En resumen, U LTRA 3D representa un avance significativo en el campo de la generación de 3D, ofreciendo una solución más eficiente y de alta calidad para la creación de modelos 3D.