Interaction mains libres : suivi oculaire et commandes vocales sur HoloLens 2

La création d'applications de réalité mixte intuitives nécessite d'aller au-delà des contrôleurs physiques et des gestes de la main. La conception pour des environnements mains libres ouvre de puissantes options d'accessibilité et des flux de travail rationalisés pour les travailleurs de première ligne et les utilisateurs quotidiens. Ce cours écrit vous guide à travers les concepts fondamentaux et la mise en œuvre pratique du suivi oculaire et des commandes vocales sur HoloLens 2. Vous passerez de la compréhension des théories d'entrée spatiale à la configuration d'objets virtuels entièrement réactifs, conscients du regard et activés par la parole. Ce que vous apprendrez : - Comprendre les concepts fondamentaux du suivi oculaire et les mécanismes de sélection basés sur le regard - Configurer les commandes vocales et les sous-systèmes de reconnaissance vocale pour l'entrée en langage naturel - Implémenter des comportements d'objets conscients du regard qui réagissent lorsque l'utilisateur les regarde - Appliquer les profils d'interaction modernes du Mixed Reality Toolkit (MRTK) pour rationaliser la configuration - Concevoir des interfaces utilisateur mains libres accessibles en utilisant les meilleures pratiques en matière d'UX spatiale - Dépanner les problèmes courants de calibration et de suivi environnemental en réalité mixte Vous commencerez par apprendre la terminologie de base de la réalité mixte et les bases de la configuration avant de passer aux stratégies de mise en œuvre étape par étape. Les leçons textuelles vous guideront ensuite à travers les structures de code et les paramètres de configuration pour connecter les entrées de regard et de parole aux actions des objets. Ce cours est conçu pour les développeurs débutants, les concepteurs UX et les passionnés de réalité mixte. Aucune expérience préalable du développement HoloLens n'est requise, bien qu'une familiarité de base avec les concepts de programmation orientée objet soit utile. Commencez à lire dès aujourd'hui pour créer des expériences interactives plus naturelles et accessibles en réalité mixte.