La última gran charla de Nvidia fue dada en parte por una versión virtual de Jensen Huang, el CEO de la compañía. Un truco publicitario para los dispositivos de Nvidia que requirió una gran inversión en tecnología.
Nvidia acaba de darle un nuevo significado a la palabra clave predeterminada. Lors de la présentation de son Omniverse en avril 2021, l’entreprise spécialisée dans l’intelligence artificielle et la conception de cartes graphiques a trompé le public en faisant animer une partie de la conférence par un clone numérique de lePD Jensen Huang, ‘company.
En el transcurso de aproximadamente dos horas de la conferencia, 14 segundos del avatar predeterminado de Jensen Huang enviadoCasi sin que nadie se dé cuenta. Estos pocos segundos pueden parecer pequeños en comparación con la duración total de la conferencia, pero requiere mucho trabajo.
clon creado por AI
Primero, los equipos de Nvidia crearon un modelo 3D de Jensen Huang filmándolo desde todos los ángulos usando una gran cantidad de cámaras. Luego, un actor con un traje de captura de movimiento releyó las viejas cartas del CEO, imitando sus movimientos. Esto permitió a Nvidia crear 21 modelos de modelado 3D que fueron analizados para crear un esqueleto virtual convincente. También se ha entrenado un algoritmo para replicar las expresiones faciales del CEO para agregar una capa de realismo.
Luego, un programa llamado Audio2Face recibió la tarea de mover la cara del clon 3D para que coincidiera con el texto que el verdadero Jensen Huang había leído. Otro programa llamado Audio2Gestures permitió a Nvidia mover los brazos y el cuerpo de un maniquí virtual de acuerdo con lo leído. Al combinar estas dos tecnologías, la clonación 3D pudo expresarse físicamente como lo haría un humano real.
El resultado de este experimento es visible Aproximadamente a las 1:02:42 en el video del programa de Nvidia. Y si la supermodelo virtual es un poco rígida, la ilusión aún funciona bien.
¿Hacia deepfakes más disfrazados?
Un ingeniero de virtualización de Jensen explica En un documental dedicado a la realización de esta conferencia que » A diferencia de crear un personaje virtual en una película, donde es posible recopilar muchos datos, aquí tenemos muy poco contenido al principio. «.Así que el desafío era crear un duplicado convincente del escaneo 3D de Huang y nada más. Mover la boca y sincronizar los movimientos con el texto» Todo está hecho gracias a la inteligencia artificial. Dice Nvidia.
Por lo tanto, el exploit aquí no es crear un humano virtual convincente, los videojuegos lo han estado haciendo durante algunos años de manera muy eficiente, sino crear una multiplicación virtual a partir de un conjunto de datos muy pequeño. » Nuestro desafío fue crear herramientas para crear humanos virtuales con mayor facilidad. ”, Explica el ingeniero a cargo del proyecto. Por lo tanto, crear un Jensen Huang virtual no es un simple truco publicitario: los algoritmos de Nvidia pueden facilitar la creación de personajes en 3D, ya sea para videojuegos o cine.
Uno puede imaginar que al analizar los personajes de la película y su forma de hablar y moverse, sería posible crear parejas convincentes. Quizás más convincente de lo que hemos visto en las últimas películas o series de Star Wars.
Comparte en las redes sociales
Continuación del video
