Treinamento e orientação de procedimento da plataforma de realidade misturada

Serviços de Mídia
Âncoras Espaciais
Video Indexer

Ideia da solução

Se você quiser nos ver expandindo este artigo com mais informações, como possíveis casos de uso, serviços alternativos, considerações de implementação ou diretrizes de preços, entre em contato conosco com GitHub Comentários!

Permitir que sua equipe e funcionários aprendam novos processos e materiais mais rapidamente, com menos erros e maior confiança, fornecendo instruções holográficas persistentes mapeadas para locais precisos em seu workspace físico. Começar a entender os funcionários com experiências de cabeça para cima e sem mãos usando HoloLens dispositivos. E com as Âncoras Espaciais do Azure, você pode colocar instruções sobre os objetos mais importantes do procedimento e retornar a esse conteúdo ao longo do tempo.

Arquitetura

Diagrama de arquiteturaBaixe um SVG dessa arquitetura.

Fluxo de dados

  1. O usuário que cria a sessão de treinamento é autenticado usando suas Azure Active Directory de HoloLens.
  2. O aplicativo cliente se conecta ao seu próprio serviço Web para criar uma sessão de treinamento. Os metadados sobre essa sessão de treinamento são armazenados no banco de dados Cosmos Azure.
  3. O usuário examina o ambiente e coloca uma primeira âncora em que a primeira etapa do procedimento precisa acontecer. As Âncoras Espaciais do Azure validam que o usuário tem permissões suficientes para criar âncoras por meio do Azure AD e, em seguida, armazena a âncora.
  4. O usuário registra um vídeo do procedimento no HoloLens e o carrega no Azure
  5. O vídeo é codificado com Serviços de Mídia e preparado para exibição sob demanda, bem como processado com Video Indexer para melhor pesquisa de conteúdo. Video Indexer armazena os metadados no banco de dados Cosmos Azure.
  6. O aplicativo salva em seu serviço Web a ID de âncora para essa primeira etapa, juntamente com um link para o vídeo.
  7. O usuário, na mesma sessão, passa para a etapa 2, coloca uma âncora lá e, novamente, registra um vídeo do procedimento e salva a ID de âncora resultante e o link de vídeo para seu serviço Web. Esse processo é repetido até que todas as etapas do procedimento sejam executadas. À medida que o usuário passa de etapa para etapa, as âncoras anteriores ainda ficam visíveis com seu respectivo número de etapa.
  8. Um estagiário entra, seleciona a sessão de treinamento, recupera IDs de âncora e links para vídeos que fazem parte do procedimento.
  9. O estagiário examina a sala para encontrar as âncoras que indicam o local do mundo real de cada etapa no procedimento. Assim que uma for encontrada, todas as âncoras serão recuperadas e mostradas no aplicativo.
  10. Em seguida, o estagiário pode refazer as etapas exatas do especialista que registrou o procedimento e exibir vídeos holográficos de cada etapa no local certo no laboratório.

Componentes

Próximas etapas