Školení a vedení postupem s pomocí smíšené reality

Azure Media Services
Azure Spatial Anchors
Azure AI Video Indexer

Nápady na řešení

Tento článek je myšlenkou řešení. Pokud chcete, abychom obsah rozšířili o další informace, jako jsou potenciální případy použití, alternativní služby, aspekty implementace nebo pokyny k cenám, dejte nám vědět tím, že nám poskytnete zpětnou vazbu k GitHubu.

Organizace můžou toto řešení využít k efektivnímu učení procesů a materiálů zaměstnancům tím, že poskytují trvalé holografické pokyny mapované na přesné umístění ve fyzických pracovních prostorech.

Architektura

Diagram architektury znázorňuje použití Microsoft Entra ID k ověřování pomocí Microsoft Hololens.Stáhněte si soubor SVG této architektury.

Tok dat

  1. Uživatel, který vytváří trénovací relaci, se ověřuje pomocí svých přihlašovacích údajů Microsoft Entra z HoloLensu.
  2. Klientská aplikace se připojuje k vlastní webové službě pro vytváření školení. Metadata o školení se ukládají do Azure Cosmos DB.
  3. Uživatel si prohlédne prostředí a umístí první ukotvení tam, kde má začít první krok postupu. Azure Spatial Anchors ověří, že uživatel má dostatečná oprávnění k vytvoření ukotvení prostřednictvím ID Microsoft Entra a pak uloží ukotvení.
  4. Uživatel zaznamená video o postupu na HoloLens a nahraje ho do Azure.
  5. Video se pomocí Media Services zakóduje a připraví pro zobrazení na vyžádání, a také ho zpracuje Video Indexer, aby šlo lépe vyhledávat jeho obsah. Video Indexer ukládá metadata v Azure Cosmos DB.
  6. Aplikace ve své webové službě uloží ID ukotvení pro tento první krok spolu s odkazem na video.
  7. Uživatel v rámci stejné relace přejde ke kroku 2, umístí tam ukotvení a znovu zaznamená video postupu a uloží výsledné ID ukotvení a odkaz na video do příslušné webové služby. Tak se proces opakuje, dokud se neprovedou všechny kroky postupu. Jak uživatel přechází od kroku ke kroku, předchozí ukotvení včetně jejich čísel kroků jsou stále viditelné.
  8. Účastník kurzu vstoupí, vybere si školení a získá ID ukotvení a odkazy na videa, která jsou součástí postupu.
  9. Účastník kurzu si prohlédne místnost, aby našel ukotvení indikující pozice v reálném světě pro jednotlivé kroky postupu. Jakmile se nějaká najde, všechna ukotvení se načtou a zobrazí v aplikaci.
  10. Účastník kurzu pak může znovu přesně projít kroky odborníka, který postup zaznamenal, a vidět holografická videa jednotlivých kroků na správné pozici v testovacím prostředí.

Komponenty

  • Spatial Anchors: Vytváření prostředí hybridní reality pracujících s více uživateli
  • ID Microsoft Entra: Synchronizace místních adresářů a povolení jednotného přihlašování
  • Azure Cosmos DB: Globálně distribuovaná vícemodelová databáze pro libovolné škálování
  • App Service: Rychlé vytváření výkonných cloudových aplikací pro web a mobilní zařízení
  • Media Services: Kódování, ukládání a streamování videa a zvuku ve velkém měřítku
  • Video Indexer: Zajištění lépe zjistitelného a přístupného média

Podrobnosti scénáře

Toto řešení vám pomůže týmu a zaměstnancům rychleji učit se nové procesy a materiály s menším počtem chyb a větší jistotou tím, že poskytne trvalé holografické pokyny mapované na přesné umístění ve svém fyzickém pracovním prostoru. Usnadněte zaměstnancům seznamování s novinkami prostřednictvím zařízení HoloLens s využitím prostředí HUHF (Head-Up, Hands-Free). A pomocí Azure Spatial Anchors můžete umístit pokyny přímo na nejdůležitější objekty jednotlivých postupů a průběžně se k tomuto obsahu vracet.

Potenciální případy použití

Organizace toto řešení používají k tomu, aby zaměstnancům (novým a aktuálním) umožnili rychleji učit se nové dovednosti, materiály a procesy, než mohou s tradičními školicími programy. Toto řešení je ideální pro vzdělávací odvětví.

Další kroky