Nueva tecnología puede intercambiar expresiones faciales en tiempo real

$config[ads_kvadrat] not found

5 NUEVAS TECNOLOGÍAS QUE VERAS EN EL 2020

5 NUEVAS TECNOLOGÍAS QUE VERAS EN EL 2020
Anonim

Recuerde que la aplicación “Myidol” de Bizarro World que se volvió viral esta primavera debido a su capacidad para usar el software de reconocimiento facial para hacer un avatar digital que se ve y se mueve. exactamente sobre todo como lo haces? Eso está a punto de convertirse en una realidad … más o menos.

Los investigadores en Stanford han descubierto cómo transferir las expresiones faciales de una persona a otra persona en tiempo real a través de un video.

El modelo que se muestra en el video de demostración de Stanford solo usa una PC de nivel de consumidor y una cámara de profundidad para cada actor, lo que significa que no necesariamente necesita un equipo elegante para ejecutar este tromp'oeil, solo necesita algunos algoritmos complejos.

Los investigadores desarrollaron un nuevo algoritmo en tiempo real que toma imágenes de alta calidad de las caras de cada participante y las usa para transponer las expresiones de un "actor de origen" (la persona que proporciona las expresiones faciales y / o el habla) a un "actor objetivo" (la persona cuya cara será manipulada de acuerdo con lo que hace el actor fuente). La información visual del actor de origen pasa por el programa y se procesa en la parte superior del flujo de video del actor objetivo, por lo que parece que el actor objetivo está sonriendo, hablando, sacando la lengua o cualquier otra cosa que se le ocurra.

Gracias a una serie de puntos de referencia trazados alrededor de la cara (similar a la aplicación Myidol), los tipos de información visual que mide el sistema incluyen la forma y las características de la cara (como los ojos, la nariz, la boca e incluso las arrugas), así como Textura y profundidad facial. Luego, el programa hace coincidir los puntos de referencia del actor de origen con los del actor objetivo y superpone esas expresiones en el objetivo para una transmisión de video hiperrealista.

Dado que este sistema todavía está en funcionamiento (y se usó un equipo bastante rudimentario), los resultados finales aún son un poco extraños, como los dientes falsos que el programa superpuso dentro de la boca del objetivo, por lo que no hay un agujero negro abierto cuando está " abierto ”(ver arriba) … así como el tipo de mirada en blanco en los ojos del objetivo. Pero esas son pequeñas papas fritas comparadas con lo que significa para nosotros el desarrollo de este programa.

Aquí hay un par de ideas para lo que podríamos usar esta tecnología para:

  • Tienes una importante entrevista de trabajo en Skype y no estás vestido para el éxito. Solo use un soporte de aspecto elegante mientras proporciona las expresiones faciales y las respuestas a las entrevistas de asesino.
  • Estás viendo una conferencia transmitida en vivo por un profesor de Alemania. El único problema es que no hablas alemán. No se preocupe, gracias a un traductor en tiempo real que utiliza este software, puede ver cómo la profesora pronuncia su discurso en su idioma nativo sin ningún atraso en el doblaje de las imágenes.

Mira el intercambio de expresiones en acción:

$config[ads_kvadrat] not found