Maison / Technologie / Comment nous avons utilisé l'IA pour hybrider des humains avec des animaux de dessins animés et en faire une entreprise.

Comment nous avons utilisé l'IA pour hybrider des humains avec des animaux de dessins animés et en faire une entreprise.

Vous êtes-vous déjà imaginé comme un personnage de dessin animé? Eh bien, maintenant, c'est plus que réel.

Nous sommes une équipe de 20 ingénieurs et designers d'art qui ont développé une technologie d'apprentissage automatique qui transforme les visages humains en personnages animés.

Le processus commence par la construction du modèle de visage 3D d’un utilisateur à partir d’un seul tir d’autoportrait. Il est important de noter que notre technologie fonctionne même avec les anciens appareils photo pour smartphones. Avec cette seule photo, notre réseau de neurones crée un maillage 3D de la tête de l’utilisateur, qui ressemble à ceci:

Le réseau de neurones régresse un modèle 3D à partir d'une photo 2D

Ensuite, 3 autres réseaux de neurones entrent en action. Le premier dessine les sourcils, le second détecte et associe la couleur des yeux et le troisième détecte et dessine les lunettes si l'utilisateur les porte. Lorsque ces éléments sont prêts, nous transformons l'utilisateur avec l'un de nos personnages de dessins animés. Cela prend une fraction de seconde.

Chaque réseau de neurones fait son travail pour personnaliser instantanément le personnage à l'utilisateur

Comme vous pouvez le voir dans les cases rouges, nous ne transformons que la zone restreinte du visage de l’utilisateur.

Nous faisons cela parce que les êtres humains et les animaux ont des topologies de visage très différentes. Voici ce qui arriverait si nous essayions de rendre les personnages plus humains:

Voici à quoi ressemblerait l’avatar si nous transformions des zones plus grandes

Un autre défi intéressant était de savoir comment intégrer les lunettes aux personnages d’animaux. Si vous avez déjà essayé de mettre des lunettes de soleil sur un chien, vous comprendrez peut-être ce problème.

Il n’était pas facile d’intégrer des lunettes à un personnage animal qui n’avait pas le nez comme un être humain.

Nourrir l'IA avec des visages 3D

Il nous a fallu trois ans pour collecter un ensemble de données exclusif de 15 000 numérisations faciales. Nous avons veillé à ce que notre jeu de données capture un éventail de races, d'âges et de sexes.

Nous avons construit un équipement spécial composé de 24 caméras pour collecter des données.

Nous avons utilisé ces données pour former nos réseaux de neurones. C’est l’élément central de nos technologies de personnalisation et de capture de la performance faciale.

Nos modèles d’apprentissage automatique peuvent traiter 60 images par seconde et reconnaissent une quantité innombrable de combinaisons de micro-expressions en temps réel.

La technologie basée sur l'IA détecte les émotions en temps réel à l'aide d'un smartphone

Le réseau de neurones peut même suivre le positionnement de la langue dans plusieurs directions.

En comparaison, les autres applications d'avatar n'ont pas cette fonctionnalité et ont simplement deux états pour le positionnement de la langue.

Beaucoup de nos utilisateurs demandaient d'ajouter cette fonctionnalité

Nous avons intégré toute cette technologie dans une application de messagerie mobile appelée Chudo. Nous l'avons lancé il y a quelques mois pour présenter nos développements technologiques au monde. Maintenant, Chudo se développe 25 fois plus vite que le début de Snapchat.

L’accessibilité est l’une des raisons pour lesquelles elle se développe si rapidement. Contrairement aux autres applications d'avatar qui ne fonctionnent que sur des smartphones coûteux, notre technologie prend en charge les appareils Android à budget réduit, les anciens iPhones et même un iPod.

Nous avons fait fonctionner notre technologie sur iPod

Caractères irréels, argent réel

La plupart des personnages de Chudo sont libres. À titre expérimental, nous avons commencé à vendre quelques avatars pour nous aider à payer les factures. Voici le classement de nos créatures les plus vendues:

Cas d'utilisation

Il existe de nombreuses industries où les gens aimeraient se voir comme des personnages de fiction:

  • Jeu informatique
  • Animation de bande dessinée
  • Jouets
  • Édition
  • la communication

Avec Chudo, notre équipe a commencé à prendre en charge le secteur de la communication.

Connaissez-vous d'autres industries où cette technologie pourrait être appliquée?

Partagez vos idées ici en commentaires ou envoyez-moi un email à gabrelyanov@chu.do.


Comment nous avons utilisé l'IA pour hybrider des humains avec des animaux de dessins animés et en faire une entreprise. a été publié à l'origine dans Hacker midi sur Medium, où les gens poursuivent la conversation en soulignant et en répondant à cette histoire.

Source

A propos newstrotteur-fr

Découvrez également

addinghumant.jpg

Ajouter une touche humaine à des chatbots inconditionnels peut conduire à une déception plus grande

Les chercheurs sont plus susceptibles d’apprécier une conversation avec un chatbot interactif qui n’a pas …

Laisser un commentaire

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *