Deep Face Editing genera y edita rostros mediante geometría y control de apariencia. La verdad es que después de ver el video, el programa despierta la curiosidad. Los métodos recientes de síntesis de imágenes faciales se han basado principalmente en modelos generativos condicionales.

Las condiciones basadas en bocetos pueden describir eficazmente la geometría de las caras, incluidos los contornos de los componentes faciales, las estructuras capilares. Así como los bordes destacados, como por ejemplo las arrugas en la superficie de la cara. Pero carecen de un control efectivo de la apariencia, que está influenciada por el color, el material, las condiciones de iluminación, etc.

Para tener más control sobre los resultados generados, un posible enfoque es aplicar cambios previos en la geometría y aspectos destacados de las personas.

Editar y crear rostros con múltiples opciones

Sin embargo, los métodos de procesado existentes no están optimizados para editar rostros humanos, y no pueden lograr un control fino de los detalles faciales, como las arrugas.

Para abordar este problema, DeepFaceEditing propone un marco de modificación estructurado diseñado específicamente para imágenes faciales. Esta aplicación puede generar y editar rostros controlando la apariencia mediante la geometría.

El programa puede trabajar tanto en zonas locales del rostro, como en el rostro en general, descomponiendo la geometría y apariencia que se fusionan constantemente utilizando un módulo de fusión global para mejorar la calidad generada.

Aprovecha bocetos que le ayudan a extraer mejor representación de la geometría, que también admite la edición intuitiva de geometría a través de las características faciales.

El método resultante puede extraer las representaciones de geometría y apariencia de las imágenes de rostro o extraer directamente la representación geométrica de las características faciales.

Estas representaciones permiten a los artistas editar y sintetizar fácilmente imágenes faciales, con control de su geometría y apariencia.

Las evaluaciones cualitativas y cuantitativas muestran las habilidades superiores para el control de detalle y apariencia de este método en comparación con los métodos de última generación.

Atención porque el programa puede generar rostros fotorrealistas a partir de bocetos dibujados a mano. Como muestra la imagen.

-rostros-realistas-dibujados-a-mano.png

La verdad es que asombra lo sencillo que parece generar nuevos rostros a partir de una sola imagen o un simple boceto. El código es gratuito ya que de momento se trata de un software en desarrollo, se puede descargar desde GitHub.

Más información en la página de los desarrolladores.