Beeble SwitchLight aporta iluminación PBR por IA

[3dpoder]

Una revolución silenciosa en los VFX. Beeble ha lanzado SwitchLight, su nuevo modelo de inteligencia artificial capaz de transformar vídeos en escenas con texturas PBR completas. Lo interesante aquí no es solo que puedas iluminar a un actor en un clip, sino que ahora puedes hacerlo con toda la escena, incluyendo fondo, objetos, coches... lo que veas en el plano. Lo hace mediante simulación de mapas PBR como si fuera una escena 3D, lo que lo convierte en una herramienta con gran potencial en VFX, motion graphics y composición digital.

Compatible con After Effects, Nuke, Blender y Unreal

Todo esto está disponible gratuitamente a través de Beeble Studio, su app web, donde puedes subir vídeos o secuencias de imágenes, hasta 2.000 frames en 2K, y iluminar usando luces puntuales o HDRIs. Y si prefieres llevarte los mapas a otro software, puedes exportarlos directamente y usarlos en After Effects, Nuke, Blender o Unreal Engine con sus plugins específicos, que ensamblan los mapas automáticamente en objetos 3D listos para iluminar.

Del actor al entorno supone un gran salto

La gran novedad es que ahora SwitchLight ya no necesita una máscara alfa ni se limita al sujeto en primer plano. El nuevo modelo IA, que es diez veces más grande que el anterior y se entrenó con trece veces más datos, genera mapas para toda la escena directamente. Esto quiere decir que, por ejemplo, si grabas un coche con actores dentro, puedes reluminar tanto al coche como al interior sin ningún paso extra.

Limitaciones actuales... y lo que viene

Eso sí, de momento la app web solo soporta vídeos de hasta 60 segundos a 30 fps, en resolución 2K, y los mapas se exportan en PNG de 8 bits (salvo los de profundidad y flujo, que van en EXR de 16 bits). La buena noticia es que el modelo también llegará pronto a SwitchLight Studio, la versión de escritorio, que soporta vídeo en 4K y secuencias EXR de 32 bits y procesa todo localmente. Se esperan más detalles en SIGGRAPH el mes que viene.

Cuando el entorno es 3D pero el presupuesto no

Para quienes trabajamos con VFX o motion graphics y tenemos que lidiar con escenas reales mal iluminadas o planos que ya están rodados, esta herramienta es como ese colega que llega tarde, pero con la solución perfecta. Ahora solo falta que también prepare el martini.

Puedes saber más sobre el tema aquí.

[3dpoder]

Beeble lanza SwitchLight 3.0, un sistema de inteligencia artificial que transforma vídeo en mapas PBR para permitir relighting de escenas y exportación de materiales a otros softwares de gráficos por computadora. Esta versión procesa múltiples fotogramas simultáneamente y ha sido entrenada con un conjunto de datos diez veces más grande que su predecesor, lo que se traduce en una recuperación superior de detalles y una reducción significativa de artefactos visuales.

Disponibilidad y formatos de exportación

SwitchLight 3.0 está accesible tanto en la aplicación web como en Beeble Studio para procesamiento local en resoluciones de hasta 4K. Los usuarios pueden exportar pases AOV en formato EXR de 16 bits y aprovechar el procesamiento por lotes, lo que agiliza el flujo de trabajo para proyectos de mayor envergadura sin comprometer la calidad.

Aplicaciones en efectos visuales y producción virtual

Esta herramienta facilita a los creadores de efectos visuales y producción virtual controlar la iluminación en vídeos como si manipularan una escena 3D, eliminando la necesidad de reconstrucción manual tediosa. Al integrar mapas PBR directamente desde el vídeo, los artistas pueden ajustar luces y sombras en tiempo real, mejorando la coherencia visual y acelerando la postproducción.

Ahora los artistas pueden culpar a la IA cuando la iluminación no queda perfecta, en lugar de su propia habilidad.