Comment nous avons utilisé l'IA pour hybrider des humains avec des animaux de dessins animés et en faire une entreprise.

1fNwBpQ5I22oH7nt1cw9K1w.jpeg

Vous êtes-vous déjà imaginé comme un personnage de dessin animé? Eh bien, maintenant, c'est plus que réel.

Nous sommes une équipe de 20 ingénieurs et designers d'art qui ont développé une technologie d'apprentissage automatique qui transforme les visages humains en personnages animés.

Le processus commence par la construction du modèle de visage 3D d’un utilisateur à partir d’un seul tir d’autoportrait. Il est important de noter que notre technologie fonctionne même avec les anciens appareils photo pour smartphones. Avec cette seule photo, notre réseau de neurones crée un maillage 3D de la tête de l’utilisateur, qui ressemble à ceci:

Le réseau de neurones régresse un modèle 3D à partir d'une photo 2D

Ensuite, 3 autres réseaux de neurones entrent en action. Le premier dessine les sourcils, le second détecte et associe la couleur des yeux et le troisième détecte et dessine les lunettes si l'utilisateur les porte. Lorsque ces éléments sont prêts, nous transformons l'utilisateur avec l'un de nos personnages de dessins animés. Cela prend une fraction de seconde.

Chaque réseau de neurones fait son travail pour personnaliser instantanément le personnage à l'utilisateur

Comme vous pouvez le voir dans les cases rouges, nous ne transformons que la zone restreinte du visage de l’utilisateur.

Nous faisons cela parce que les êtres humains et les animaux ont des topologies de visage très différentes. Voici ce qui arriverait si nous essayions de rendre les personnages plus humains:

Voici à quoi ressemblerait l’avatar si nous transformions des zones plus grandes

Un autre défi intéressant était de savoir comment intégrer les lunettes aux personnages d’animaux. Si vous avez déjà essayé de mettre des lunettes de soleil sur un chien, vous comprendrez peut-être ce problème.

Il n’était pas facile d’intégrer des lunettes à un personnage animal qui n’avait pas le nez comme un être humain.

Nourrir l'IA avec des visages 3D

Il nous a fallu trois ans pour collecter un ensemble de données exclusif de 15 000 numérisations faciales. Nous avons veillé à ce que notre jeu de données capture un éventail de races, d'âges et de sexes.

Nous avons construit un équipement spécial composé de 24 caméras pour collecter des données.

Nous avons utilisé ces données pour former nos réseaux de neurones. C’est l’élément central de nos technologies de personnalisation et de capture de la performance faciale.

Nos modèles d’apprentissage automatique peuvent traiter 60 images par seconde et reconnaissent une quantité innombrable de combinaisons de micro-expressions en temps réel.

La technologie basée sur l'IA détecte les émotions en temps réel à l'aide d'un smartphone

Le réseau de neurones peut même suivre le positionnement de la langue dans plusieurs directions.

En comparaison, les autres applications d'avatar n'ont pas cette fonctionnalité et ont simplement deux états pour le positionnement de la langue.

Beaucoup de nos utilisateurs demandaient d'ajouter cette fonctionnalité

Nous avons intégré toute cette technologie dans une application de messagerie mobile appelée Chudo. Nous l'avons lancé il y a quelques mois pour présenter nos développements technologiques au monde. Maintenant, Chudo se développe 25 fois plus vite que le début de Snapchat.

L’accessibilité est l’une des raisons pour lesquelles elle se développe si rapidement. Contrairement aux autres applications d'avatar qui ne fonctionnent que sur des smartphones coûteux, notre technologie prend en charge les appareils Android à budget réduit, les anciens iPhones et même un iPod.

Nous avons fait fonctionner notre technologie sur iPod

Caractères irréels, argent réel

La plupart des personnages de Chudo sont libres. À titre expérimental, nous avons commencé à vendre quelques avatars pour nous aider à payer les factures. Voici le classement de nos créatures les plus vendues:

Cas d'utilisation

Il existe de nombreuses industries où les gens aimeraient se voir comme des personnages de fiction:

  • Jeu informatique
  • Animation de bande dessinée
  • Jouets
  • Édition
  • la communication

Avec Chudo, notre équipe a commencé à prendre en charge le secteur de la communication.

Connaissez-vous d'autres industries où cette technologie pourrait être appliquée?

Partagez vos idées ici en commentaires ou envoyez-moi un email à gabrelyanov@chu.do.


Comment nous avons utilisé l'IA pour hybrider des humains avec des animaux de dessins animés et en faire une entreprise. a été publié à l'origine dans Hacker midi sur Medium, où les gens poursuivent la conversation en soulignant et en répondant à cette histoire.

Source

Laisser un commentaire

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Faits divers

Homme accusé de la mort d’une fille de 4 ans…

Les procureurs vont demander la condamnation à mort d’un banlieusard de Chicago accusé d’avoir battu à mort une fillette...

Un chirurgien condamné à une amende de 3 000 Dollars…

Le conseil de médecine de la Floride a annoncé qu’un chirurgien de West Palm Beach avait accepté de payer...

Un ancien combattant et son épouse font don de toutes…

Un ancien combattant compatissant et son épouse font don de la quasi-totalité de leurs biens matériels aux pompiers qui...

Cette beauté jaune de la taille d’un œuf est le…

En dépit de ce que leur prix élevé suggère, les diamants ne sont pas rares. Environ 133 millions de carats , soit...

Articles recents

L’opération Grand Heist de Black Ops 4 ajoute des poursuites…

Call of Duty: Black Ops 4 reçoit une grosse mise à jour et arrive sur PS4 pour la première fois cette semaine. Operation Grand Heist ajoute de nouveaux personnages,...

Sammi Giancola veut le mariage et les enfants avec BF…

L’ancienne star de «Jersey Shore», Sammi Giancola, souffre de «fièvre infantile» et est prête à s’atteler le plus vite possible. C’est ce qu’un copain dit EXCLUSIVEMENT à HL. Nicole...

A découvrir

Découvrez dès maintenant le ebook qui va donner un coup de pouce à votre productivité!

illusions-d-optique-video
plages-cachees-newstrotteur
personnes-incroyables-newstrotteur
endroits-mysterieux-newstrotteur
science-inexpliquees-newstrotteur
mystères_jamais-resolues
Actualité