Una revolución silenciosa en los VFX. Beeble ha lanzado SwitchLight, su nuevo modelo de inteligencia artificial capaz de transformar vídeos en escenas con texturas PBR completas. Lo interesante aquí no es solo que puedas iluminar a un actor en un clip, sino que ahora puedes hacerlo con toda la escena, incluyendo fondo, objetos, coches... lo que veas en el plano. Lo hace mediante simulación de mapas PBR como si fuera una escena 3D, lo que lo convierte en una herramienta con gran potencial en VFX, motion graphics y composición digital.


Compatible con After Effects, Nuke, Blender y Unreal

Todo esto está disponible gratuitamente a través de Beeble Studio, su app web, donde puedes subir vídeos o secuencias de imágenes, hasta 2.000 frames en 2K, y iluminar usando luces puntuales o HDRIs. Y si prefieres llevarte los mapas a otro software, puedes exportarlos directamente y usarlos en After Effects, Nuke, Blender o Unreal Engine con sus plugins específicos, que ensamblan los mapas automáticamente en objetos 3D listos para iluminar.

Del actor al entorno supone un gran salto

La gran novedad es que ahora SwitchLight ya no necesita una máscara alfa ni se limita al sujeto en primer plano. El nuevo modelo IA, que es diez veces más grande que el anterior y se entrenó con trece veces más datos, genera mapas para toda la escena directamente. Esto quiere decir que, por ejemplo, si grabas un coche con actores dentro, puedes reluminar tanto al coche como al interior sin ningún paso extra.

Limitaciones actuales... y lo que viene

Eso sí, de momento la app web solo soporta vídeos de hasta 60 segundos a 30 fps, en resolución 2K, y los mapas se exportan en PNG de 8 bits (salvo los de profundidad y flujo, que van en EXR de 16 bits). La buena noticia es que el modelo también llegará pronto a SwitchLight Studio, la versión de escritorio, que soporta vídeo en 4K y secuencias EXR de 32 bits y procesa todo localmente. Se esperan más detalles en SIGGRAPH el mes que viene.


Cuando el entorno es 3D pero el presupuesto no

Para quienes trabajamos con VFX o motion graphics y tenemos que lidiar con escenas reales mal iluminadas o planos que ya están rodados, esta herramienta es como ese colega que llega tarde, pero con la solución perfecta. Ahora solo falta que también prepare el martini.

Puedes saber más sobre el tema aquí.