Usługi i aplikacje w chmurze rzeczywistości mieszanej

Ukończone

Podczas opracowywania zawartości rzeczywistości mieszanej prawdopodobnie znajdziesz scenariusze, w których trzeba przechowywać informacje o umieszczaniu obiektów lub renderować złożone modele 3D. Może być też potrzebne wykorzystanie zalet usług poznawczych, takich jak tłumaczenie mowy i przetwarzanie obrazów. Ponadto dzięki usłudze Microsoft Mesh użytkownicy mogą współpracować nad modelami 3D z lokalizacji zdalnych, tak jakby pracowały ze sobą w tym samym pomieszczeniu.

Usługi w chmurze rzeczywistości mieszanej

Usługa Azure Remote Rendering umożliwia renderowanie wysoce złożonych modeli 3D w czasie rzeczywistym i ich przesyłanie strumieniowe bezpośrednio do urządzenia przez przeniesienie obciążenia renderowania do wysokiej klasy procesorów GPU w chmurze. Ta usługa jest szczególnie ważna w przypadku aplikacji, które mogą być opracowywane dla niezwiązanych urządzeń, ponieważ mają one mniejszą moc obliczeniową na potrzeby renderowania.

Fotografia dwóch modeli 3D silników samochodowych. Model po lewej zawiera dużo trójkątów, a model po prawej zawiera mało trójkątów.

Usługa Azure Spatial Anchors pozwala tworzyć aplikacje z orientacją przestrzenną. Oznacza to, że można mapować, utrwalać i udostępniać zawartość holograficzną na wielu urządzeniach w skali rzeczywistej. Ta usługa jest międzyplatformowa i doskonale nadaje się do znajdowania, obsługi wielu użytkowników i zapisywania informacji o obiekcie.

Animowana ilustracja zakotwiczenia przestrzennego utrwalonego w tabeli między sesjami aplikacji.

Firma Microsoft ma kilka usług cognitive services , które można zintegrować z aplikacjami rzeczywistości mieszanej. Na przykład usługa Mowa pozwala zintegrować funkcje przetwarzania mowy z dowolnymi aplikacjami lub usługami. Można konwertować język mówiony na tekst lub generować naturalnie brzmiącą mowę na podstawie tekstu przy użyciu standardowych (lub dostosowywalnych) czcionek głosowych.

Innym przykładem jest usługa Vision, która umożliwia aplikacji rozpoznawanie, identyfikowanie, transkrypcję, indeksowanie i moderowanie obrazów, wideo oraz zawartości pisma cyfrowego. Możliwe jest nawet, aby aplikacje prawidłowo identyfikowały i analizowały zawartość w ramach obrazu lub wideo.

Aplikacje rzeczywistości mieszanej usługi Dynamics 365

Aplikacja Dynamics 365 Remote Assist umożliwia użytkownikom uzyskiwanie pomocy lub wydajną współpracę z różnych lokalizacji fizycznych przy użyciu urządzeń HoloLens i HoloLens 2 oraz urządzeń z systemem Android lub iOS. Ta funkcja jest bardzo cenna w scenariuszach, takich jak konserwacja i naprawa, inspekcje zdalne lub sesje szkoleniowe.

Fotografia użytkownika urządzenia HoloLens wykonującego naprawę mechaniczną podczas korzystania z aplikacji Remote Assist do komunikowania się ze współpracownikiem.

Przewodniki usługi Microsoft Dynamics 365 to aplikacja rzeczywistości mieszanej dla Microsoft HoloLens, która pozwala operatorom uczyć się podczas przepływu pracy, udostępniając instrukcje holograficzne, kiedy i gdzie są potrzebne. Te karty z instrukcjami są wizualnie powiązane z miejscem, w którym należy wykonać prace. Mogą to być między innymi obrazy, filmy i modele holograficzne 3D.

Microsoft Mesh

Usługa Mesh umożliwia ludziom łączenie się z obecnością, udostępnianie w przestrzeni i współpracę ze sobą z dowolnego miejsca na świecie. Dzięki prowadzeniu środowisk rzeczywistości mieszanej z obsługą usługi Mesh w organizacji można ulepszyć spotkania wirtualne, prowadzić wirtualne sesje projektowe, pomagać innym osobom zdalnie i hostować immersywne wirtualne spotkania w celu zwiększenia produktywności.

Fotografia przedstawiająca osoby korzystające z urządzenia HoloLens do współpracy.

Usługa Mesh zapewnia naturalne środowisko współpracy w rzeczywistości mieszanej. Osoby są reprezentowane jako awatary 3D w przestrzeni wspólnej. Bliskość i dźwięk przestrzenny pozwalają ludziom wiedzieć, gdzie są względem siebie. Użytkownicy mogą wizualizować i dodawać adnotacje do zawartości w udostępnionej przestrzeni 3D. Użytkownik może przyjrzeć się osobie, z którą rozmawia, i wskazać funkcje na udostępnionym obiekcie 3D.

Scenariusze

Oto kilka typowych przypadków użycia usługi Microsoft Mesh:

  • Współpraca wirtualna: Współpracownicy pracujący ze strefami czasowymi mogą współpracować tak, jakby fizycznie znajdowali się w tym samym pomieszczeniu. Usługa Mesh integruje się z platformą Microsoft 365, więc połączenia, kalendarze, zawartość i przepływy pracy naturalnie przechodzą do rzeczywistości mieszanej. Te wspólne środowiska pomagają pogłębić zrozumienie, zwiększyć zaangażowanie pracowników i zwiększyć produktywność.

    Zdjęcie wirtualnego środowiska współpracy w usłudze Microsoft Mesh: osoby współpracujące z hologramem samochodu.

  • Przeglądy projektów z rozpoznawaniem przestrzennym: Siatka rozszerza przeglądy projektów 3D, umożliwiając użytkownikom dołączanie z dowolnego miejsca przy użyciu dowolnego urządzenia. Bez względu na to, czy są obecne fizycznie, czy holoportowane, współpracownicy mogą wyświetlać i dodawać adnotacje do modeli 3D w czasie rzeczywistym. Cała zawartość jest zachowywana między sesjami projektu, dzięki czemu zespoły mogą szybko rozpocząć od miejsca, w którym zostały przerwane. To wspólne zrozumienie rozpala pomysły, iskrzy kreatywność i tworzy potężne więzi.

    Zdjęcie przedstawiające środowisko projektowania z obsługą przestrzenną usługi Microsoft Mesh: dwie osoby współpracujące z hologramem 3D zestawu produktów.

  • Pomoc innym osobom zdalnie: Gdy pracownicy potrzebują pomocy, nie ma nic takiego jak posiadanie eksperta bezpośrednio obok nich w celu zapewnienia wskazówek i zaoferowania nowych perspektyw. Usługa Mesh umożliwia ekspertom zdalnym prezentowanie wszędzie tam, gdzie są potrzebne. Mogą nakładać dane kontekstowe i pomóc w szybkim i efektywnym udostępnianiu szczegółowych informacji, szybszym rozwiązywaniu problemów.

    Zdjęcie środowiska pomocy zdalnej usługi Microsoft Mesh: dwie osoby na całym świecie wizualizujące obraz holograficzny danych 3D, jak pokazano na skali globalnej.

  • Trenowanie i uczenie się razem: Szkolenie, zwłaszcza w złożonych tematach, takich jak operacja, konserwacja sprzętu i kontrola ruchu, jest trudne do zrobienia bez bycia w tym samym pomieszczeniu z instruktorem i patrząc na ten sam zestaw obiektów z wielu perspektyw. Dzięki usłudze Mesh pracownicy mogą uczyć się razem z dowolnego miejsca dzięki holoportacji, udostępnianiu holograficznym i wizualizacji. Mesh pomaga zwiększyć skuteczność szkolenia wirtualnego przy jednoczesnym zmniejszeniu kosztów podróży i logistyki.

    Zdjęcie zdalnego środowiska uczenia się usługi Microsoft Mesh: zdalne szkolenie technik kaligrafii przy użyciu pędzli do malowania.

  • Hostowanie wirtualnych spotkań: Wspieraj głębsze poczucie połączenia i społeczności, hostując wirtualne spotkania w środowiskach rzeczywistości mieszanej opartej na usłudze Mesh. Formuj potężne więzi z innymi, pozwalając swojej osobowości świecić, gdy technologia zanika.

    Zdjęcie wirtualnego spotkania z usługą Microsoft Mesh: lekarz i pacjent spotykają się zdalnie, aby sprawdzić postęp rehabilitacji.