EbSynth convierte el vídeo en animación pintada a mano
EbSynth es una interesante herramienta que convierte el vídeo en estilizadas pinturas en movimiento, el software transfiere el aspecto de uno o más frames de estilo generados manualmente a los del vídeo, creando el aspecto de una animación pintada a mano.
El programa estábasado en investigaciones recientes en transferencia de estilo y síntesis de texturas, EbSynth se basa en la investigación de la Universidad Técnica Checa en Praga y Adobe Research.
A diferencia de otros trabajos realizados en el campo, no se basa en el aprendizaje automático, sino que utiliza una implementación de última generación de algoritmos de síntesis de texturas no paramétricos.
Dado que EbSynth no funciona a partir de datos 3D subyacentes, no puede estilizar con precisión partes de objetos que no se muestran en el fotograma clave o que faltan por completo, esto significa que el fotograma clave debe coincidir estrechamente con el material de archivo (para que sea lo más preciso posible, debe ser una sobrepinta de un fotograma de vídeo real) y se recomienda un nuevo fotograma clave después de cada cambio significativo de perspectiva.
Además, el usuario puede proporcionar máscaras para especificar qué partes del fotograma de vídeo se debe aplicar a la estilización: por ejemplo, para estilizar un personaje, pero no el fondo.
El software también se exporta directamente a After Effects, con tomas secuenciadas automáticamente en la línea de tiempo de After Effects, y trabaja bastante rápido.
Curiosamente, EbSynth fue lanzado originalmente, algunos artistas de efectos visuales han comenzado a utilizar el software para automatizar tareas como la calificación y la eliminación de imperfecciones.
EbSynth está disponible en versión beta para Windows y MacOS. El software es gratuito para cualquier uso y puedes descargalo desde su página web.
https://youtu.be/0RLtHuu5jV4
EbSynth software para automatizar la rotoscopia
EbSynth software para automatizar la rotoscopia desarrollado por Secret Weapons, aunque está todavía en fase beta la nueva herramienta de la compañía tecnológica de Praga crea todos los marcos intermedios en cualquier estilo artístico, pintura al óleo, acuarela, pastel y otros.
EbSynth, diseñada para automatizar la rotoscopia en estilos arbitrarios. Los animadores proporcionan una referencia de vídeo, pero en lugar de pintar sobre cada fotograma, sólo tienen que pintar un conjunto de fotogramas clave. EbSynth crea todos los marcos intermedios en el mismo estilo artístico, que puede ser totalmente arbitrario, pintura al óleo, acuarela, pastel o medios digitales. El algoritmo respeta la visión del artista y conserva su estilo en todos sus detalles. Este flujo de trabajo reduce notablemente la cantidad de tiempo que un animador tendría que dedicar en un proyecto.
Según Jakub Javora, artista principal de Secret Weapons, la motivación es simple, le encantaría ver más películas animadas pictóricas en los cines. Y sentimos que la tendencia se mueve en esa dirección, Klaus, por ejemplo, es una película tan hermosa. El nuevo Spider-Man animado fue increíble. Y luego está Loving Vincent, que fue pintado marco por marco y la gente pensó que era una locura. La animación dibujada a mano ha sido un proceso increíblemente tedioso hasta ahora. Pero no tiene por qué serlo a partir de ahora. Con EbSynth, los animadores pueden acelerar el trabajo mientras conservan su escritura auténtica.
EbSynth se encuentra actualmente en su versión Beta, que se puede descargar de forma gratuita en https://ebsynth.com.
La tecnología detrás de EbSynth no es inteligencia artificial, es un algoritmo de síntesis de texturas. Se puede imaginar como un rompecabezas, obtiene un fotograma de vídeo y su par de versiones estilizadas. Desmonta el marco estilizado en pequeñas piezas y conociendo las correspondencias posicional y basadas en color con el marco original, utiliza las piezas estilizadas para ensamblar también otros fotogramas de vídeo.
Al usar la síntesis, nos aseguramos de que el resultado final sea rico en textura y preserve el estilo del artista con gran fidelidad, que es una cualidad que la mayoría de los métodos neuronales no tienen.
Originalmente trabajaba como una herramienta para la rotoscopia, desde el lanzamiento alfa del año pasado, la gama de casos de uso del programa se extendió a la industria de efectos visuales y la animación 3D también. Los artistas 3D empezaron a usar EbSynth para mejorar sus renders con suaves pinceladas, los compositores lo utilizan para retocar o colorear videos rápidos, incluso las personas que no tienen nada que ver con el arte a menudo lo usan junto con FaceApp, por ejemplo, para hacer videos con sus propios familiares.
https://youtu.be/hPk8un22KO0
