Prise en main de la conscience spatiale — MRTK2

  • Article

Reconnaissance spatiale

Le système Spatial Awareness fournit une conscience réelle de l’environnement dans les applications de réalité mixte. Lorsqu’elle a été introduite sur Microsoft HoloLens, Spatial Awareness a fourni une collection de maillages, représentant la géométrie de l’environnement, ce qui a permis des interactions attrayantes entre les hologrammes et le monde réel.

Notes

À l’heure actuelle, Mixed Reality Toolkit n’est pas fourni avec les algorithmes Spatial Understanding tels qu’ils ont été empaquetés à l’origine dans l’HoloToolkit. Spatial Understanding implique généralement la transformation des données de maillage spatial pour créer des données mesh simplifiées et/ou groupées telles que des plans, des murs, des planchers, des plafonds, etc.

Prise en main

L’ajout de la prise en charge de Spatial Awareness nécessite deux composants clés de Mixed Reality Toolkit : le système Spatial Awareness et un fournisseur de plateforme pris en charge.

  1. Activer le système de reconnaissance spatiale
  2. Inscrire et configurer un ou plusieurs observateurs spatiaux pour fournir des données de maillage
  3. Créer et déployer sur une plateforme qui prend en charge Spatial Awareness

Activer le système de sensibilisation spatiale

Le système Spatial Awareness est géré par l’objet MixedRealityToolkit (ou un autre composant de bureau d’enregistrement de services ). Suivez les étapes ci-dessous pour activer ou désactiver le système Spatial Awareness dans le profil MixedRealityToolkit .

Mixed Reality Toolkit est fourni avec quelques profils préconfigurés par défaut. Le système de reconnaissance spatiale est activé pour certains d’entre eux ou désactivé par défaut. L’objectif de cette préconfiguration, en particulier en cas de désactivation, est d’éviter la surcharge visuelle liée au calcul et au rendu des maillages.

Profil Système activé par défaut
DefaultHoloLens1ConfigurationProfile (Assets/MRTK/SDK/Profiles/HoloLens1) False
DefaultHoloLens2ConfigurationProfile (Assets/MRTK/SDK/Profiles/HoloLens2) False
DefaultMixedRealityToolkitConfigurationProfile (Ressources/MRTK/SDK/Profils) True

  1. Sélectionnez l’objet MixedRealityToolkit dans la hiérarchie de scène à ouvrir dans le panneau d’inspecteur.

    Hiérarchie de scènes configurée MRTK

  2. Accédez à la section Système de sensibilisation spatiale et case activée Activer le système de sensibilisation spatiale

    Activer la reconnaissance spatiale

  3. Sélectionnez le type d’implémentation de système de reconnaissance spatiale souhaité. MixedRealitySpatialAwarenessSystem est la valeur par défaut fournie.

    Sélectionnez l’implémentation du système de sensibilisation spatiale

Inscrire des observateurs

Les services de Mixed Reality Toolkit peuvent avoir des services de fournisseur de données qui complètent le service main avec des données et des contrôles d’implémentation spécifiques à la plateforme. Le système d’entrée Mixed Reality en est un exemple, qui a plusieurs fournisseurs de données pour obtenir des informations de contrôleur et d’autres informations d’entrée associées à partir de différentes API spécifiques à la plateforme.

Le système Spatial Awareness est similaire dans le fait que les fournisseurs de données fournissent au système des données de maillage sur le monde réel. Le profil Spatial Awareness doit avoir au moins un observateur spatial inscrit. Les observateurs spatiaux sont généralement des composants spécifiques à la plateforme qui jouent le rôle de fournisseur pour la mise en surface de différents types de données de maillage à partir d’un point de terminaison spécifique à la plateforme (par exemple HoloLens).

  1. Ouvrez ou développez le profil Spatial Awareness System

    Profil du système de reconnaissance spatiale

  2. Cliquez sur le bouton « Ajouter Un observateur spatial »

  3. Sélectionner le type d’implémentation Spatial Observer souhaité

    Sélectionner l’implémentation De l’observateur spatial

  4. Modifier les propriétés de configuration sur l’observateur si nécessaire

Notes

Les utilisateurs de (DefaultMixedRealityToolkitConfigurationProfileAssets/MRTK/SDK/Profiles) auront le système Spatial Awareness préconfiguré pour la plateforme Windows Mixed Reality qui utilise la WindowsMixedRealitySpatialMeshObserver classe.

Générer et déployer

Une fois que le système de reconnaissance spatiale est configuré avec le ou les observateurs souhaités, le projet peut être créé et déployé sur la plateforme cible.

Important

Si vous ciblez la plateforme Windows Mixed Reality (par exemple, HoloLens), il est important de vous assurer que la fonctionnalité De perception spatiale est activée afin d’utiliser le système De sensibilisation spatiale sur l’appareil.

Avertissement

Certaines plateformes, notamment Microsoft HoloLens, prennent en charge l’exécution à distance à partir d’Unity. Cette fonctionnalité permet un développement et des tests rapides sans nécessiter l’étape de génération et de déploiement. Veillez à effectuer un test d’acceptation final à l’aide d’une version générée et déployée de l’application, exécutée sur le matériel et la plateforme cibles.

Étapes suivantes

Après avoir suivi les procédures ci-dessus pour activer le système de reconnaissance spatiale, le système peut être configuré et contrôlé plus en détail.

Informations sur la configuration des observateurs dans l’inspecteur :

Informations pour le contrôle et l’extension des observateurs via le code :

Voir aussi