Marble: modelo 3D del mundo multimodal 83

Marble es un modelo de mundo 3D multimodal lanzado por World Labs de Li Fei-Fei, pensado para creadores. Permite crear entornos 3D que se pueden recorrer, modificar y descargar a partir de texto, una o varias imágenes, vídeos cortos o diseños 3D sencillos, con control de cámara y edición interactiva hasta el último píxel. Está orientado principalmente al desarrollo de videojuegos, efectos visuales para cine y televisión, y realidad virtual. Su seña de identidad es que los mundos 3D que genera mantienen su coherencia y no se deforman.

Funciones principales de Marble

• Generación 3D multimodal: admite entradas como texto, una sola imagen, fotos desde distintos ángulos o vídeos cortos. Por ejemplo, al teclear "cocina hobbit" se genera una escena 3D completa con muebles de madera y utensilios de cobre; subiendo una foto normal de una habitación, en unos 6 minutos se crea un entorno 3D panorámico de 360 grados. Con varias imágenes o vídeos, los escenarios de gemelos digitales resultan mucho más realistas. Además, el usuario primero monta un esqueleto 3D con geometrías simples, y la ia se encarga de añadir automáticamente detalles como iluminación y materiales.

• Edición y ampliación flexibles: es el primer modelo que incorpora herramientas de edición con IA de serie. Permite modificar solo una parte o ajustar la estructura: por ejemplo, con una sola frase se puede eliminar la papelera de la escena y la iluminación se adapta al cambio. Con su editor Chisel, primero se colocan geometrías para definir la estructura espacial y luego se define el estilo con texto; con la misma estructura y cambiando el prompt se obtienen escenas de estilos muy distintos. También se pueden añadir detalles en los bordes de la escena o usar el "modo compositor" para unir varias escenas independientes sin juntas visibles.

• Exportación en múltiples formatos: los resultados se pueden exportar como gaussian splatting, mallas triangulares, etc. Las mallas triangulares se dividen a su vez en mallas de colisión de baja precisión y mallas de renderizado de alta precisión, listas para usarse directamente en motores profesionales como Unity o Unreal Engine. También se pueden exportar vídeos y aplicar de forma automática efectos dinámicos como humo o agua fluyendo mediante IA. Además, es compatible con visores de VR como Apple Vision Pro y Meta Quest 3, para crear experiencias de VR directamente.

• Editor 3D experimental Chisel: primero se construye el "esqueleto" espacial con geometrías básicas y luego se establece el "estilo" general con texto, separando estructura y estilo para poder reutilizarlos por separado.

• Expansión y combinación de mundos: permite añadir detalles con un solo clic en las zonas seleccionadas, y también usar el modo de combinación para unir varios mundos independientes en un espacio mayor.

Flujo de trabajo típico de Marble

• Elegir primero el modo de entrada: con texto o una sola imagen se obtienen conceptos rápidamente; con varias imágenes o vídeo se consigue más precisión y control. Para escenas complejas, lo mejor es usar varias imágenes o vídeo.

• Generar el mundo: una vez obtenido el entorno 3D recorrible, se revisa primero en vista 2D o 3D si la perspectiva, las proporciones y el estilo son coherentes.

• Edición precisa: usar las herramientas de IA para modificar zonas locales o rellenar lo que falte, o usar Chisel para reconstruir la estructura y luego cambiar el estilo, ajustando así estructura y apariencia por separado.

• Ampliar la escala: añadir detalles en los bordes o en zonas débiles, o usar el modo de combinación para unir varios mundos pequeños en un espacio grande, ganando así más profundidad.

• Exportar y llevar a producción: para visualización en alta definición, usar gaussian splatting; para integrarlos como assets en motores de juegos o de efectos visuales, usar mallas; para reels promocionales o pruebas de cámara, usar renderizado en vídeo con efectos; para compartir en la web, se puede usar el renderizador Spark de código abierto integrado con THREE.js.

Precios de suscripción de Marble

Hay cuatro niveles. El plan gratuito ofrece 7000 puntos al mes, permite crear hasta 4 mundos y solo admite entradas básicas como texto e imágenes; el plan estándar cuesta 20 $ al mes, ofrece 20000 puntos, permite crear 12 mundos y admite entradas de varias imágenes y vídeo; el plan profesional cuesta 35 $ al mes (1 $ el primer mes), ofrece 40000 puntos, permite crear 25 mundos y admite uso comercial; el plan flagship cuesta 95 $ al mes, ofrece 120000 puntos, permite crear 75 mundos y desbloquea todas las funciones.

Casos de uso de Marble

• Desarrollo de videojuegos: crear rápidamente prototipos de niveles transitables y espacios de ambiente, con assets listos para los motores más usados.

• Efectos visuales para cine y televisión: aportar materiales 3D muy controlables y rutas de cámara precisas para previsualizaciones y fondos.

• Realidad virtual / exhibiciones inmersivas: crear experiencias inmersivas transitables y展示 interactivas.

• Simulación para robots: generar entornos variados de entrenamiento simulado, reduciendo la dificultad de recopilar datos.

Ventajas y limitaciones de Marble

• Ventajas: es mucho más rápido que el modelado tradicional; una escena sencilla se resuelve en pocos minutos. Equipos de Hollywood lo han usado para reducir el tiempo de previsualización cinematográfica de 3 meses a solo 2 días. En escenas estáticas y de pequeño tamaño, como una habitación, la estructura y el estilo se mantienen bastante estables y la textura es suficiente. Los formatos de exportación se conectan con las principales herramientas de desarrollo y dispositivos de VR, enlazando la creación con el uso final.

• Limitaciones: cuando la escena es mayor que una habitación, las zonas lejanas tienden a emborronarse y deformarse. La composición con varias imágenes puede atascarse y la tasa de éxito en escenas complejas aún debe mejorar. De momento solo genera escenas estáticas, sin elementos dinámicos ni efectos físicos, y la reconstrucción de algunos requisitos complejos no es todavía lo suficientemente precisa.

Marble reduce la dificultad de escribir prompts y permite a cualquier persona obtener en unos minutos un mundo 3D que se puede recorrer, modificar y descargar. Es, hoy por hoy, la única herramienta de producción de "inteligencia espacial generativa" disponible públicamente.

Noticias relacionadas:

Modelos 3D generados por IA