Mode de recherche HoloLens

Le mode recherche a été introduit sur les appareils HoloLens (1ère génération) pour donner accès aux capteurs clés, en particulier pour les applications de recherche qui ne sont pas destinées au déploiement. Le mode recherche pour HoloLens 2 conserve les fonctionnalités d’HoloLens 1, mais ajoute l’accès aux flux suivants :

  • Caméras de suivi de l’environnement de lumière visible : caméras à l’échelle de gris utilisées par le système pour le suivi de la tête et la création de cartes.

  • Caméra de profondeur : fonctionne en deux modes :

    • AHAT, haute fréquence (45 FPS) détection de près de profondeur utilisée pour le suivi de la main. Contrairement au mode de courte levée de la première version, AHAT donne une pseudo-profondeur avec un wrap de phase au-delà de 1 mètre.
    • Détection de profondeur longue et basse fréquence (1-5 FPS) utilisée par le mappage spatial
  • Deux versions du flux de réflectivité IR : utilisées par HoloLens pour calculer la profondeur. Ces images sont illuminées par l’infrarouge et non affectées par la lumière visible ambiante.

Si vous utilisez une HoloLens 2, vous avez également accès aux entrées supplémentaires ci-dessous :

  • Accéléromètre : utilisé par le système pour déterminer l’accélération linéaire le long des axes X, Y et Z et la gravité.
  • Gyro : utilisé par le système pour déterminer les rotations.
  • Magnétomètre : utilisé par le système pour estimer l’orientation absolue.

Important

Le mode Recherche est actuellement en préversion publique.

Capture d’écran de l’application en mode recherche
Capture en réalité mixte d’une application de test qui affiche les huit flux de capteurs disponibles en mode Recherche

Utilisation

Le mode recherche est conçu pour les chercheurs universitaires et industriels qui explorent de nouvelles idées dans les domaines de la Vision par ordinateur et de la robotique. Il n’est pas destiné aux applications déployées dans des environnements d’entreprise ou disponibles via le Microsoft Store ou d’autres canaux de distribution.

En outre, Microsoft ne garantit pas que le mode recherche ou les fonctionnalités équivalentes seront pris en charge dans les mises à jour futures du matériel ou du système d’exploitation. Cependant, ne laissez pas cela vous empêcher de l’utiliser pour développer et tester de nouvelles idées!

Sécurité et performances

L’activation du mode Recherche utilise plus de batterie que l’utilisation de la HoloLens 2 dans des conditions normales, même si l’application utilisant les fonctionnalités du mode recherche n’est pas en cours d’exécution. L’activation de ce mode peut également réduire la sécurité globale de votre appareil, car les applications peuvent mal utiliser les données du capteur. Vous trouverez plus d’informations sur la sécurité des appareils dans la FAQ sur la sécurité HoloLens.

Prise en charge des appareils

Fonctionnalité HoloLens première génération HoloLens 2
Caméras de suivi de la tête ✔️ ✔️
Caméra ir & profondeur ✔️ ✔️
Accéléromètre ✔️
Gyroscope ✔️
Magnétomètre ✔️

Activation du mode recherche (HoloLens first Gen et HoloLens 2)

Le mode recherche est une extension du mode développeur. Avant de commencer, les fonctionnalités de développement de l’appareil doivent être activées pour accéder aux paramètres du mode recherche :

  • Ouvrez Paramètres du menu > Démarrer et sélectionnez Mises à jour.
  • Sélectionnez Pour les développeurs et activez le mode Développeur.
  • Faites défiler la liste et activez le portail d’appareil.

Une fois les fonctionnalités de développeur activées, connectez-vous au portail de l’appareil pour activer les fonctionnalités du mode recherche :

  • Accédez au mode recherche système > dans le portail de l’appareil.
  • Sélectionnez Autoriser l’accès au flux de capteur.
  • Redémarrez l’appareil à partir de l’élément de menu Alimentation en haut de la page.

Une fois que vous avez redémarré l’appareil, les applications chargées via le portail de l’appareil peuvent accéder aux flux en mode Recherche.

Onglet Mode recherche du portail d’appareil HoloLens
Fenêtre Mode recherche dans le portail d’appareil HoloLens

Important

Le mode recherche pour HoloLens 2 est disponible à partir de la build 19041.1364 . Si vous avez besoin d’un accès dans une version antérieure, inscrivez-vous à notre programme Insider Preview . Vous trouverez plus d’informations dans le dépôt GitHub en mode recherche.

Utilisation des données de capteur dans vos applications

Les applications peuvent accéder aux données de flux de capteur de la même manière que Media Foundation accède aux flux de caméras photo et vidéo.

Toutes les API qui fonctionnent pour le développement HoloLens sont également disponibles en mode Recherche. En particulier, l’application sait précisément où HoloLens se trouve dans l’espace 6DoF à chaque heure de capture de l’image du capteur.

Nous avons des exemples d’applications montrant l’accès au flux en mode recherche, en utilisant les intrinsèques et extrinsèques, et les flux d’enregistrement :

Support

Pour HoloLens (première génération), utilisez le suivi des problèmes dans le référentiel HoloLensForCV pour publier des commentaires et suivre les problèmes connus.

Pour HoloLens 2, utilisez le suivi des problèmes dans le référentiel HoloLens2ForCV pour publier des commentaires et suivre les problèmes connus.

Voir aussi