Hand Tracking with Only Webcam

Qu’est-ce que la capture de mouvement par webcam ?

Webcam Motion Capture est un logiciel de capture de mouvement pour caméras IA développé par KWCL Inc., qui permet d’utiliser l’image d’une caméra d’ordinateur ou d’un smartphone pour animer des avatars virtuels en format VRM.

Il se concentre sur le suivi de la main et des doigts, tout en couvrant la tête, les expressions, le regard, les clignements d’yeux, la forme de la bouche, les mouvements du tronc supérieur et du corps entier, ce qui le rend adapté aux streams virtuels, à l’enregistrement vidéo et à la création d’animations de personnages de base.

Fonction principale

1. Suivi de la main et des doigts

Le logiciel peut reconnaître les mouvements du bras, de la paume et des doigts sans avoir besoin de gants spéciaux ou de traceurs. Un arrière-plan lumineux et des coudes ainsi que des avant-bras complètement visibles aident généralement à obtenir des résultats plus stables.

2. Capture du visage et du corps

Le système prend en charge le suivi de la tête, des expressions faciales, de l’orientation des yeux, des clignements d’yeux, de la forme de la bouche, du haut du corps et du corps entier, et permet également de configurer des expressions automatiques ainsi que des BlendShape personnalisés.

Une seule caméra est sujette à des obstacles et à des limites dans l’estimation de la profondeur ; elle peut être instable lors de virages rapides, lorsque les mains se croisent ou que les jambes quittent le champ de vision.

3. Avatar VRM

L’utilisateur peut importer ses propres modèles VRM, que le Webcam Motion Receiver reçoit pour traiter les données de suivi et rendre le personnage. Si le modèle ne dispose pas d’osselets corporels ou de doigts standard, certaines actions ne pourront pas être correctement mappées.

4. Protocole VMC et applications externes

Les utilisateurs payants peuvent envoyer des données d’action via les protocoles OSC/VMC à des outils compatibles tels que VSeeFace, Unity, Unreal Engine, etc., afin de permettre au capteur vidéo de suivre le flux en direct ou d’intégrer le processus de développement.

5. Export des animations FBX

Le logiciel peut enregistrer les données capturées sous forme de fichiers FBX, ce qui facilite leur édition ultérieure dans des logiciels 3D tels que Blender, Maya et 3ds Max. Il convient de tester la mise à l’échelle des os, le taux de rafraîchissement et l’enregistrement des squelettes élastiques avant d’exporter.

6. Diffusion en direct OBS avec arrière-plan transparent

L’utilisateur peut cacher l’image de la caméra, définir un arrière-plan transparent, puis effectuer des diffusions en direct ou enregistrer des vidéos en tant que streamer virtuel via OBS. La possibilité de cacher l’interface du logiciel fait partie des fonctionnalités disponibles dans la version payante.

Plateforme de support

• Windows 10 ou une version ultérieure.
• macOS Catalina ou une version ultérieure.
• Des packages d’installation pour Apple Silicon et Intel Mac sont fournis séparément.
• Les applications officielles d’assistance pour iPhone et iPad permettent de transférer le calcul du suivi sur un appareil mobile.
• Les téléphones Android peuvent utiliser des applications de caméra tierces comme entrée vidéo.

Au 24 août 2026, la version desktop du site officiel est 1.11.3. Avant de la télécharger et de l’installer, veuillez vérifier à nouveau la version actuelle, l’origine du fichier ainsi que les avertissements de sécurité du système.

Comparaison des prix et des versions

Les prix ci-dessous ont été vérifiés le 24 août 2026 sur la page dynamique du site officiel, en dollars américains. Les taxes, les modes de paiement par région, les remises et les ajustements ultérieurs sont indiqués sur la page de paiement réelle.

Selon le site officiel, lorsque des abonnés existants achètent une licence à vie, ils peuvent déduire le montant de l’abonnement déjà payé, mais le tarif minimum après réduction est de 1 dollar. Il est possible de continuer à l’utiliser jusqu’à la fin du cycle de facturation en cours, même après annulation de l’abonnement.

Tutoriel d'utilisation

1. Téléchargez le paquet d’installation correspondant à l’architecture du processeur Windows ou Mac depuis le site officiel.
2. Après l’installation, lancez simultanément Webcam Motion Capture et Webcam Motion Receiver.
3. Accordez les permissions à la caméra, sélectionnez l’appareil et utilisez d’abord 640×360 pour tester la fluidité.
4. Importer des personnages conformes aux normes VRM, et vérifier que le corps ainsi que les os de chaque doigt sont complets.
5. Placez la caméra à une hauteur proche de celle de la tête, afin que le visage, la poitrine, les coudes et les paumes soient clairement visibles.
6. Calibrer les expressions, les clignements d’yeux, la forme de la bouche et les mouvements du corps, puis augmenter progressivement la résolution et la qualité de l’image.
7. Configurer un arrière-plan transparent et OBS lors de la diffusion en direct ; définir l’adresse VMC, le port et le plugin de réception lors de la connexion à d’autres logiciels.
8. Avant l’enregistrement officiel, effectuer des tests de mouvements rapides, de masquage et de fonctionnement sur une longue durée, et préparer un plan de basculement manuel.

Améliorer la stabilité du suivi

• Utilisez une illumination uniforme et évitez la lumière en contre-jour, les ombres fortes et des arrière-plans désordonnés.
• La caméra reste stable et fait en sorte que l’utilisateur soit face à l’objectif.
• Lors du suivi de la main, laissez apparaître le avant-bras et le coude pour éviter que des manches larges ne les cachent.
• Lorsque les performances sont insuffisantes, réduire la résolution et la vitesse de capture, ou diminuer la qualité graphique du récepteur.
• Le mode corps entier peut être testé à partir de 1280×720, en veillant à ce que les jambes restent dans le cadre.
• Lorsqu’il est nécessaire d’utiliser deux applications de suivi en même temps, on peut employer une deuxième caméra, un téléphone ou une caméra virtuelle compatible.

À qui s’adresse-t-il

• Streamers virtuels sans équipement professionnel de capture de mouvement et débutants en diffusion en direct.
• Utilisateurs de personnages virtuels tels que VSeeFace qui nécessitent des mouvements de la main pour être complétés.
• Créateurs de contenu qui produisent des vidéos courtes, des explications et des animations de personnages.
• Développeurs qui souhaitent transmettre des actions à Unity ou Unreal Engine via VMC.
• Concepteurs 3D qui doivent enregistrer les mouvements de base au format FBX avant de procéder à des retouches plus fines.

Avantages du produit

• Une caméra ordinaire suffit pour suivre plusieurs parties du corps, le seuil d’équipement est faible.
• La version gratuite permet de tester en détail la qualité du suivi avant de décider d’obtenir une version payante.
• Prend en charge à la fois Windows, les Mac Intel et les Mac Apple Silicon.
• Le protocole VMC et l’export FBX facilitent l’intégration dans des processus de production externes.
• Les abonnements mensuels, les paiements anticipés à court terme et les licences à vie offrent différentes options de coût.

Restrictions d'utilisation et précautions

• Une caméra monochrome ne peut pas atteindre la précision spatiale d’un système professionnel à plusieurs caméras ou de la capture de mouvement inertielle.
• La obstruction, le fait de quitter le champ de vision, la faible luminosité et des arrière-plans similaires réduisent la stabilité du suivi des doigts et du corps.
• Une résolution élevée augmente la charge du CPU et du GPU ; une qualité d’image plus haute ne garantit pas nécessairement un suivi plus fluide.
• La version gratuite permet de tester le suivi, mais l’envoi de données vers l’extérieur, la dissimulation de l’interface et l’export en FBX nécessitent une licence.
• Lors de la diffusion en direct ou de l’enregistrement des mouvements du visage d’autrui, il convient d’obtenir un consentement clair et de protéger les données enregistrées.
• Lorsque le logiciel antivirus bloque quelque chose, il ne faut pas désactiver aveuglément les protections de sécurité ; il convient d’abord de vérifier l’origine du téléchargement et la signature du fichier.

GitHub et les frontières du logiciel open source

EasyVirtualMotionCaptureForUnity, abrégé en EVMC4U et lié à une base de données, est un plugin indépendant utilisé par Unity pour recevoir des données au format protocole VMC, sous licence MIT. Il peut recevoir les données issues de la capture de mouvement par webcam, mais ce n’est pas le code source de l’application de capture de mouvement elle-même.

L’application principale Webcam Motion Capture ne dispose d’aucune licence open source publiquement confirmée et doit être considérée comme un logiciel commercial. De même, le protocole VMC étant public ainsi que les plugins réceveurs, cela ne signifie pas pour autant que l’ensemble du programme de suivi payant est open source.

Questions fréquentes

Est-ce que c’est possible d’utiliser sans payer ?

Toutes les fonctionnalités de suivi peuvent être testées. Pour cacher l’interface en direct, l’envoyer à une application externe via VMC ou l’exporter en FBX, il est nécessaire d’être abonné ou d’acheter une licence prépayée.

Quelles caméras sont nécessaires

On peut commencer avec une simple caméra d’ordinateur, ou utiliser un smartphone en tant que caméra. L’efficacité du suivi dépend davantage de la lumière, du cadrage, du taux de rafraîchissement et des obstacles en mouvement, et non seulement de la résolution.

Prend-il en charge le suivi du corps entier ?

Il prend en charge le mode de suivi du corps entier avec une caméra, mais la précision pour les pieds, les rotations et les obstacles est limitée. Lors d’une production professionnelle, il convient d’évaluer l’utilisation de plusieurs caméras ou d’équipements de capture de mouvement spécialisés.

Peut-on l’exporter pour Unity ?

La licence payante peut être exportée via le protocole VMC, et l’application Unity peut utiliser des plugins de réception tels qu’EVMC4U. Il convient de vérifier les ports, le pare-feu, les squelettes du modèle et les paramètres réseau.

Résumé

La capture de mouvement par webcam convient pour suivre les doigts, le visage et le corps des avatars virtuels à un coût matériel faible. Les tests gratuits ainsi que diverses options de abonnement payant facilitent également l’évaluation. Sa précision reste cependant limitée par l’utilisation d’une seule caméra ; avant de la choisir, il convient de tester en détail les mouvements réels, les performances du ordinateur, la compatibilité des modèles et les besoins en sortie externe.