El intercambio de rostros a través de bases neuronales y tecnología de punta, ha permitido que varios personajes cambien su apariencia y rostro en Hollywood. Vale destacar lo que hizo Martin Scorsese en The Irishman, que logró rejuvenecer a los actores Robert de Niro y Joe Pesci.
Lo cierto es que Disney estaba trabajando hace tiempo en una propuesta para que estos cambios de cara sean legales en la industria.
Y Disney Research, el departamento que se encarga de investigar estas innovaciones, escribió un documento titulado “Intercambio de caras neuronales de alta resolución para efectos visuales”, escrito por Jacek Naruniec (DisneyResearch | Studios), Leonhard Helminger (DisneyResearch | Estudios / ETH Joint PhD), Christopher Schroers (DisneyResearch | Estudios) y Romann M. Weber (DisneyResearch | Estudios).
El artículo menciona que, “proponemos un algoritmo para el intercambio de caras neurales totalmente automático en imágenes y videos. Hasta donde sabemos, este es el primer método capaz de generar resultados fotorrealistas y temporalmente coherentes a una resolución de megapíxeles. Con este fin, presentamos una red de peine multidireccional progresivamente entrenada y un método de mezcla que preserva la luz y el contraste”.
Con un video demostraron las múltiples opciones de intercambio de rostros que se pueden conseguir para una película:
“También mostramos que, si bien el entrenamiento progresivo permite la generación de imágenes de alta resolución, extender la arquitectura y los datos de entrenamiento más allá de dos personas nos permite lograr una mayor fidelidad en las expresiones generadas. Al componer la expresión generada en la cara objetivo, mostramos cómo adaptar la estrategia de fusión para preservar el contraste y la iluminación de baja frecuencia”, sostienen en el departamento de desarrollo de Disney.
La principal conclusión y la manera de llevar a cabo el estudio es explicado por Naruniec, Helminger, Schroers y Weber.
“Incorporamos una estrategia de refinamiento en el algoritmo de estabilización de puntos de referencia para lograr la estabilidad temporal, que es crucial para trabajar con videos de alta resolución. Llevamos a cabo un extenso estudio de ablación para mostrar la influencia de nuestras elecciones de diseño en la calidad del intercambio y comparar nuestro trabajo con métodos populares de última generación”, sostuvieron.
