Une IA arrive à animer des personnages sur des photos ou des peintures

le 27 mai 2019 à 09h25
0

Une Intelligence Artificielle (IA) a réussi à animer le visage de personnages tirés de photos ou de peintures.

L'algorithme peut « donner vie » à n'importe quel type de portrait, transformant ainsi des images de visages uniques et fixes en têtes animées.

Un peu comme la Grosse Dame


Dans une démonstration des capacités (assez incroyables) du logiciel, on aperçoit Mona Lisa, célèbre pour son expression ambiguë, animée comme l'un des tableaux de la saga Harry Potter. Elle tourne la tête, fait mine de parler et cligne des yeux. Malgré ces résultats impressionnants voir fascinants, l'équipe de recherche a pour l'instant refusé de commenter ses travaux.


La technologie, mise au point par un groupe de chercheurs du Samsung AI Center et de l'Institut des sciences et technologies de Skolkovo à Moscou, repose sur des réseaux de neurones à convolution. L'objectif est d'obtenir d'une image source qu'elle imite (avec le plus de réalisme possible) les mouvements du faciès d'une personne. Ce qui est intéressant dans ce document hébergé par arXiv, c'est que le système n'exige pas une tonne d'images sources et semble fonctionner après avoir vu une image, une seule fois (d'où le fait que cela fonctionne parfaitement bien avec un tableau comme la Joconde).

Cartographier le mouvement du visage


Comment cette technologie fonctionne-t-elle ? Premièrement, un réseau d'incorporation cartographie des informations telles que la taille des yeux, du nez et de la bouche de l'image source, puis les convertit en vecteurs. Deuxièmement, un réseau de générateurs copie l'expression d'une personne dans une vidéo, en traçant les repères de son visage. Troisièmement, un « réseau » colle les vecteurs incorporés de l'image source sur les points de repère de la vidéo cible... de sorte que l'image source imite le mouvement de la vidéo.


À la fin du process, un « score de réalisme » est calculé. Le score est utilisé pour vérifier dans quelle mesure l'image source correspond aux poses de la vidéo cible. Avant que le système soit suffisamment bon pour travailler sur des exemples avec très peu d'échantillons d'entrée (comme la Joconde), ce dernier a nécessité une formation préalable très approfondie.

Source : The Register
Cet article vous a intéressé ?
Abonnez-vous à la newsletter et recevez chaque jour, le meilleur de l’actu high-tech et du numérique.
Sélection Clubic VPN 2019

Les dernières actualités

General Motors envisage... un Hummer 100% électrique
Les vélos et trottinettes électriques bientôt légales dans l'état de New York
Radar 360° et caméra arrière, Damon pousse l'innovation sur ses motos électriques
Dr.Mario World arrive le 10 juillet sur iOS et Android
Volkswagen garantira les batteries de l'ID.3 pendant 8 ans : une première
Selon Kuo, Apple proposerait à nouveau un smartphone compact en 2020
RCS : le successeur du SMS arrive et c'est Google qui s'en charge
Salon du Bourget - Drones : Dassault et XSun présentent un prototype autonome à alimentation solaire
Test du Jabra Elite 85h : un casque Bluetooth performant dans tous les domaines
Libra : ce qu'il faut savoir sur la cryptomonnaie annoncée de Facebook
scroll top