Przegubowe śledzenie dłoni i oczu w unity

HoloLens 2 wprowadziła nowe i ekscytujące możliwości, takie jak Artykułowane ręce i śledzenie oczu.

Najprostszym sposobem wykorzystania nowej funkcji w środowisku Unity jest korzystanie z zestawu NARZĘDZI MRTK. Istnieją również przykładowe sceny ułatwiające rozpoczęcie pracy.

Bloki konstrukcyjne obsługujące ręce, oczy i inne w MRTK

Zestaw narzędzi MRTK w wersji 2 udostępnia zestaw kontrolek interfejsu użytkownika i bloków konstrukcyjnych, które ułatwiają przyspieszenie opracowywania.

ButtonPrzycisk Bounding BoxObwiedni Manipulation HandlerProgram obsługi manipulowania
Kontrolka przycisku, która obsługuje różne metody wejściowe, w tym przegubową ręką urządzenia HoloLens2 Standardowy interfejs użytkownika do manipulowania obiektami w przestrzeni 3D Skrypt do manipulowania obiektami za pomocą jednej lub dwóch rąk
SlateŁupek System KeyboardKlawiatura systemowa InteractableInterakcja
Płaszczyzna stylu 2D, która obsługuje przewijanie z przegubowymi wejściami ręcznymi Przykładowy skrypt używania klawiatury systemowej w środowisku Unity Skrypt umożliwiający interakcję obiektów ze stanami wizualizacji i obsługą motywów
SolverSolver Object CollectionKolekcja obiektów TooltipEtykietka narzędzia
Różne zachowania pozycjonowania obiektów, takie jak tag wzdłuż, blokada ciała, stały rozmiar widoku i magnetyzm powierzchni Skrypt do układania tablicy obiektów w kształcie trójwymiarowym Interfejs użytkownika adnotacji z elastycznym systemem kotwicy/przestawnym, który może służyć do etykietowania kontrolerów ruchu i obiektu.
App BarPasek aplikacji PointersWskaźniki Fingertip VisualizationWizualizacja etykietki palca
Interfejs użytkownika ręcznej aktywacji urządzenia Bounding Box Dowiedz się więcej o różnych typach wskaźników Wizualna przystępność na palcach, co zwiększa pewność siebie w przypadku bezpośredniej interakcji
Eye Tracking: Target SelectionŚledzenie oczu: wybór docelowy Eye Tracking: NavigationŚledzenie oczu: nawigacja
Łączenie oczu, głosu i ręcznego wejścia, aby szybko i bez wysiłku wybierać hologramy w całej scenie Dowiedz się, jak automatycznie przewijać tekst lub powiększać skoncentrowaną zawartość w oparciu o to, co patrzysz Przykłady rejestrowania, ładowania i wizualizowania użytkowników przeglądanych w aplikacji

Przykładowe sceny

Zapoznaj się z różnymi typami interakcji i kontrolek interfejsu użytkownika zestawu narzędzi MRTK w tej przykładowej scenie.

Inne przykładowe sceny można znaleźć w Mixed Reality Toolkit GitHub w obszarze Assets/MixedRealityToolkit.Examples/Demosfolder.

Example Scene

Następny punkt kontrolny programowania

Jeśli obserwujesz drogę rozwoju aparatu Unity, którą ułożyliśmy, jesteś w środku eksplorowania podstawowych bloków konstrukcyjnych zestawu NARZĘDZI MRTK. W tym miejscu możesz przejść do następnego bloku konstrukcyjnego:

Możesz też przejść do Mixed Reality możliwości platformy i interfejsów API:

Zawsze możesz wrócić do punktów kontrolnych programowania aparatu Unity w dowolnym momencie.

Zobacz też