Treinamento e orientação de procedimento da plataforma de realidade misturada

Serviços de Mídia do Azure
Âncoras Espaciais do Azure
Azure AI Video Indexer

Ideias de soluções

Esse artigo é uma ideia de solução. Caso deseje que ampliemos o conteúdo com mais informações, como possíveis casos de uso, serviços alternativos, considerações sobre implementação ou diretrizes de preços, fale conosco enviando seus comentários no GitHub.

As organizações podem usar essa solução para ajudar os funcionários a aprender processos e materiais de forma eficaz, fornecendo instruções holográficas persistentes mapeadas para locais precisos em espaços de trabalho físicos.

Arquitetura

Architecture diagram shows using Microsoft Entra ID to authenticate with Microsoft Hololens.Baixe um arquivo SVG dessa arquitetura.

Fluxo de dados

  1. O usuário que cria a sessão de treinamento faz a autenticação usando as credenciais do Microsoft Entra do HoloLens.
  2. O aplicativo cliente é conectado ao seu próprio serviço Web para criar uma sessão de treinamento. Os metadados sobre a sessão de treinamento são armazenados no Azure Cosmos DB.
  3. O usuário examina o ambiente e coloca uma primeira âncora no local em que a primeira etapa do procedimento precisa ocorrer. As Âncoras Espaciais do Azure validam se o usuário tem permissões suficientes para criar as âncoras via Microsoft Entra ID e, depois, armazenam a âncora.
  4. O usuário registra um vídeo do procedimento no HoloLens e faz o upload no Azure.
  5. O vídeo é codificado com os Serviços de Mídia e preparado para exibição sob demanda, bem como processado com o Video Indexer para melhor pesquisa de conteúdo. O Video Indexer armazena os metadados no Azure Cosmos DB.
  6. O aplicativo salva a ID da âncora em seu serviço Web na primeira etapa, com um link do vídeo.
  7. O usuário, na mesma sessão, prossegue para a etapa 2, coloca uma âncora lá e, novamente, registra um vídeo do procedimento e salva a ID da âncora resultante e o link de vídeo para seu serviço Web. Esse processo é repetido até que todas as etapas no procedimento tenham sido executadas. À medida que o usuário prossegue pelas etapas, as âncoras anteriores ainda permanecem visíveis com seus respectivos números de etapa.
  8. Um estagiário selecione a sessão de treinamento, recupera a ID da âncora e faz o vínculo com vídeos que fazem parte do procedimento.
  9. O estagiário examina a sala para localizar as âncoras que indicam a localização no mundo real de cada etapa no procedimento. Assim que uma é encontrada, todas as âncoras são recuperadas e mostradas no aplicativo.
  10. O estagiário pode, em seguida, passar novamente pelas etapas exatas do especialista que registrou o procedimento e exibir vídeos holográficos de cada etapa no local correto no laboratório.

Componentes

  • Âncoras Espaciais: crie experiências de realidade misturada multiusuário e com reconhecimento espacial
  • Microsoft Entra ID: sincronize diretórios locais e habilite o logon único
  • Azure Cosmos DB: o banco de dados de vários modelos distribuído globalmente para qualquer escala
  • Serviço do Aplicativo: crie rapidamente aplicativos de nuvem avançados para a Web e para dispositivos móveis
  • Serviços de Mídia: codificar, armazenar e transmitir áudio e vídeo em grande escala
  • Video Indexer: torne a mídia mais acessível e de fácil descoberta

Detalhes do cenário

Esta solução pode ajudá-lo a permitir que sua equipe e funcionários aprendam novos processos e materiais com mais rapidez, com menos erros e mais confiança fornecendo instruções holográficas persistentes mapeadas para localizações precisas em seu espaço de trabalho físico. Impulsione a compreensão dos funcionários com experiências sem uso das mãos usando dispositivos HoloLens. E, com as Âncoras Espaciais do Azure, você pode colocar instruções nos objetos mais importantes do procedimento e voltar a esse conteúdo ao longo do tempo.

Possíveis casos de uso

As organizações usam essa solução para permitir que os funcionários (novos e atuais) aprendam novas habilidades, materiais e processos mais rapidamente do que com os programas de treinamento tradicionais. Essa solução é ideal para o setor de educação.

Próximas etapas