Utbildning och procedurvägledning med hjälp av mixad verklighet

Media Services
Spatial Anchors
Video Indexer

Lösningsidé

Om du vill att vi utökar den här artikeln med mer information, till exempel potentiella användningsfall, alternativa tjänster, implementeringsöverväganden eller prisvägledning, kan du berätta för GitHub Feedback!

Gör det möjligt för ditt team och anställda att lära sig nya processer och material snabbare, med färre fel och större förtroende genom att tillhandahålla beständiga holografiska instruktioner mappade till exakta platser på deras fysiska arbetsyta. Snabbförståelse för medarbetare med hjälp av praktiska funktioner med HoloLens enheter. Och med Azure Spatial Anchors kan du placera anvisningar om procedurens viktigaste objekt och återgå till det här innehållet över tid.

Arkitektur

Arkitekturdiagram – Ladda ned en SVG för den här arkitekturen.

Dataflöde

  1. Användaren som skapar utbildningssessionen autentiseras med sina Azure Active Directory autentiseringsuppgifter från HoloLens.
  2. Klientprogrammet ansluter till sin egen webbtjänst för att skapa en träningssession. Metadata om träningssessionen lagras i Azure Cosmos DB.
  3. Användaren genomsöker miljön och placerar en första fästpunkt där det första steget i proceduren måste ske. Azure Spatial Anchors verifierar att användaren har tillräcklig behörighet för att skapa fästpunkter via Azure AD och lagrar sedan fästpunkten.
  4. Användaren spelar in en video om proceduren i HoloLens laddar upp den till Azure
  5. Videon kodas med Media Services och förbereds för visning på begäran, samt bearbetas med Video Indexer för bättre innehållssökning. Video Indexer lagrar metadata på Azure Cosmos DB.
  6. Appen sparar ankar-ID:t för det första steget mot sin webbtjänst tillsammans med en länk till videon.
  7. Användaren går sedan vidare till steg 2, placerar en fästpunkt där och registrerar återigen en video av proceduren och sparar det resulterande fästpunkts-ID:t och videolänken till webbtjänsten. Processen upprepas sedan tills alla steg i proceduren körs. När användaren flyttar från steg till steg visas fortfarande tidigare fästpunkter med respektive stegnummer.
  8. En favorit kommer in, väljer träningssessionen, hämtar fästpunkts-ID:er och länkar till videor som ingår i proceduren.
  9. The the scans the room to find the anchors indicating the real-world location of each step in the procedure. När ett hittas hämtas alla fästpunkter och visas i appen.
  10. Sedan kan du spåra de exakta stegen för experten som antecknade proceduren och visa holografiska videor för varje steg på rätt plats i labbet.

Komponenter

Nästa steg