Dela via


Avancerade HoloLens-emulator- och Mixed Reality-simulatorindata

De flesta emulatoranvändare behöver bara använda de grundläggande indatakontrollerna för HoloLens-emulatorn eller Windows Mixed Reality-simulatorn. Informationen nedan gäller avancerade användare som har hittat ett behov av att simulera mer komplexa typer av indata.

Begrepp

För att komma igång med att styra de virtuella indata till HoloLens-emulatorn och Windows Mixed Reality simulatorn bör du först förstå några begrepp.

Rörelse syftar på att styra och ändra position och orientering för något i scenen. För ett riktat kontrollbart objekt styrs rörelse med både rotation och översättning (rörelse) längs tre axlar.

  • Yaw: Sväng vänster eller höger.
  • Tonhöjd: Vrid uppåt eller nedåt.
  • Roll: Rulla sida-till-sida.
  • X: Flytta åt vänster eller höger.
  • Y: Flytta upp eller ned.
  • Z: Flytta framåt eller bakåt.

Gest- och rörelsekontrollantindata mappas nära till fysiska enheter:

  • Åtgärd: Simulerar åtgärden att trycka på pekfingret mot tummen eller dra åtgärdsknappen på en styrenhet. Åtgärdsindata kan till exempel användas för att simulera lufttryckningsgesten, bläddra igenom innehåll och trycka och hålla ned.
  • Bloom/Systemgest eller Home: HoloLens bloom/systemgesten eller en styrenhets Hem-knapp används för att återgå till gränssnittet och för att utlösa systemåtgärder.

Händerna har en rik representation i HoloLens 2. Förutom att spåras/inte spåras och användas för körgester har händerna nu en artikulerad skelettmodell som passar dem och exponeras för utvecklaren. Skelettmodellen har 26 spårade punkter på varje hand.

  • Led: En av 20 spårade positioner för en viss spårad hand med en associerad punkt i 3d utrymme.
  • Pose: En komplett samling av alla leder i en spårad hand, 26 leder totalt.

Vi exponerar för närvarande inte direkt kontroll över enskilda gemensamma positioner via emulatorn, men du kan ange dem via simulerings-API:et. Vi har en uppsättning användbara representativa poser som emulatorn låter dig växla mellan.

Du kan också styra tillståndet för simulerade sensorindata:

  • Återställ: Returnerar alla simulerade sensorer till sina standardvärden. Från och med HoloLens 2 emulatorn kan en återställning begränsas till en eller båda händerna. Koppla in önskade händer med hjälp av modifierarnycklarna eller knapparna (vänster och/eller höger alt, eller vänster och/eller höger stötfångare på spelplattan).
  • Spårning: Växlar genom positionella spårningslägen, inklusive:
    • Standard: Operativsystemet väljer det bästa spårningsläget baserat på systemets begäranden.
    • Orientering: Tvingar endast orienteringsspårning, oavsett systembegäranden.
    • Positional: Framtvingar positionsspårning, oavsett systembegäranden.

Typer av indata

I följande tabell visas hur varje typ av indata mappar till tangentbordet, musen och Xbox-styrenheten. Varje typ har olika mappning beroende på indatakontrollläget. Du hittar mer information om lägen för indatakontroll senare i det här dokumentet.

Indata Tangentbord Mus Xbox-styrenhet
Gir Vänster-/högerpilar Dra vänster/höger Höger tumstick vänster/höger
Pitch Upp-/nedpilar Dra uppåt/nedåt Höger tumsticka uppåt/nedåt
Rulle Q/E DPad vänster/höger
X A/D Vänster tumstick vänster/höger
Y Sida upp/nedsida DPad upp/ned
Z W/S Vänster tumstick upp/ned
Åtgärd Ange eller blanksteg Höger knapp En knapp eller en utlösare
Bloom/System F2- eller Windows-nyckel B-knapp
Styrenhetsgreppsknapp/Handgrepp G
Menyknapp för styrenhet M
Touchpad-pekenhet för styrenhet U
Tryck på styrenhetspekplattan P
Kontrollantens tumstickstryck K
Spårningstillstånd för vänster kontrollant F9
Spårningstillstånd för rätt kontrollant F10
Hand "Stäng" pose 7
Öppna pose för hand (standard) 8
Handens "punkt"-pose 9
Handens "nypa"-pose 0
Återställ Escape-nyckel Knappen Starta
Spårning T eller F3 X-knapp

Obs! Styrenhetsknapparna kan riktas mot ena handen/styrenheten eller den andra med hjälp av handanpassningsmodifierarna.

Inriktning

Några av ovanstående indatabegrepp är fristående. Action, Bloom/System, Reset och Tracking är fullständiga begrepp, behöver inte och påverkas inte av ytterligare modifierare för målanpassning. De återstående begreppen kan tillämpas på ett av flera mål. Vi har introducerat sätt för dig att ange vilket mål som kommandot ska tillämpas på. I samtliga fall är det möjligt att ange via användargränssnittet eller via tangentbordspressar, vilket objekt som ska riktas. I vissa fall är det också möjligt att ange direkt med Xbox-handkontrollen.

I följande tabell beskrivs alternativen för målanpassning och hur du aktiverar var och en av dem.

Objekt Tangentbordsmodifierare Styrenhetsmodifierare Användargränssnittsmodifierare för emulator
Brödtext (standard) (standard) (standard)
Head Håll H (Inte tillgängligt) (Inte tillgängligt)
Vänster/styrenhet Håll kvar alt-knappen Håll vänster axelknapp Left-Hand-kartnål
Höger hand/styrenhet Håll höger alt-knapp Håll höger axelknapp Right-Hand-kartnål
Ögon Håll Y (Inte tillgängligt) Ögon, kartnål

Följande tabell visar hur varje målmodifierare mappar var och en av de grundläggande indatabegreppen för rörelse

Indata Standard (brödtext) Hand/handkontroll (Håll Alt, håll gamepad axelknapp eller växla UI-kartnål) Huvud (håll H) Ögon (Håll Y eller växla UI-kartnål)
Gir Sväng vänster/höger i brödtexten Flytta handen åt vänster/höger Vrid huvudet åt vänster/höger Blicken ser vänster/höger ut
Pitch Vrid huvudet uppåt/nedåt Flytta handen uppåt/nedåt Vrid huvudet uppåt/nedåt Blicken tittar uppåt/nedåt
Rulle Rulla huvudet åt vänster/höger Rulla huvudet åt vänster/höger (Ingen åtgärd)
X Skjut brödtext vänster/höger Flytta hand/styrenhet åt vänster/höger Vrid huvudet åt vänster/höger (Ingen åtgärd)
Y Flytta upp/ned brödtexten Flytta upp/ned hand/styrenhet Vrid huvudet uppåt/nedåt (Ingen åtgärd)
Z Flytta brödtext framåt/bakåt Flytta hand/styrenhet framåt/bakåt Vrid huvudet uppåt/nedåt (Ingen åtgärd)

Kontrollera en app

Följande uppsättning kontroller föreslås för daglig användning:

Åtgärd Tangentbord och mus Kontrollant
Brödtext X A/D Vänster tumstick vänster/höger
Brödtext Y Sida upp/nedsida DPad upp/ned
Brödtext Z W/S Vänster tumstick upp/ned
Brödtext Yaw Dra musen åt vänster/höger Höger tumstick vänster/höger
Huvud Yaw H + dra musen åt vänster/höger H (på tangentbord) + höger tumsticka vänster / höger
Huvudhöjd Dra musen uppåt/nedåt Höger tumsticka uppåt/nedåt
Huvudrulle Q/E DPad vänster/höger
Hand/kontrollant X Alt + A / D Axel + vänster tumstick vänster / höger
Hand/styrenhet Y Alt + Sida upp/sida ned Axel + DPad upp/ned
Hand/styrenhet Z Alt + W/S Axel + vänster tumstick upp/ned
Hand/Styrenhet Yaw Alt + dra musen åt vänster/höger Axel + höger tumstick vänster / höger
Hand-/styrenhetshöjd Alt + dra musen uppåt/nedåt Axel + höger tumsticka uppåt/nedåt
Hand-/kontrollantrulle Alt + Q / E Axel + DPad vänster / höger
Åtgärd Höger musknapp Utlösare
Bloom / System / Hem F2- eller Windows-nyckel B-knapp
Återställ Escape Knappen Starta
Spårning T X-knapp
Rullning Alt + höger musknapp + dra musen uppåt/nedåt Axel + utlösare + höger tumsticka uppåt/nedåt
Flytta/rotera snabbare Vänster eller höger Skift-tangent Tryck på och håll i den högra tumsticken
Flytta/rotera långsamt Vänster eller höger Ctrl-tangenten Tryck och håll kvar vänster tumsticka

Använda ett Windows Mixed Reality integrerande headset och rörelsestyrenheter med HoloLens 2 emulatorn

När du använder ett Windows Mixed Reality integrerande headset med HoloLens 2 emulatorn mappas rörelse och rotation automatiskt till headsetets rörelse och rotation. Rörelsestyrenhetens position och orientering mappas automatiskt till handposition och orientering i emulatorn. I tabellen nedan visas ytterligare åtgärder som är tillgängliga när du använder en rörelsestyrenhet.

Anteckning

När du använder ett headset ignoreras standardtangentbord, mus och gamepad automatiskt.

Åtgärd Åtgärd Kommentarer
Brödtext X Tumsticka vänster/höger
Brödtext Z Tumsticka framåt/bakåt
Brödtext Y Tangentbordssida uppåt/nedåt Se till att Windows Mixed Reality har fokus. Tryck på Win+Y om fokus ligger på Windows-skrivbordet för att återgå till Windows Mixed Reality.
Ögon titta vänster / höger DPad vänster/höger
Ögon titta upp / ner DPad upp/ned
Tryck på Utlösare
Nyp/greppa Gripknapp
Systemgest Menyknapp
Återställ position Klicka på tumstick

Perception Simulation Kontrollpanelen kortkommandon

Du kan komma åt kontrollpanelen för perceptionssimulering och aktivera eller inaktivera pc-indataenheter med följande kortkommandon.

Åtgärd Genväg Beskrivning/anteckningar
Växla "Använd tangentbord för simulering" F4 När det är inaktiverat går tangentbordsindata till HoloLens- eller Windows Mixed Reality-programmet.
Växla "Använd mus för simulering" F5 När den är inaktiverad går musindata till Mixed Reality-miljön (endast Windows Mixed Reality)
Växla "Använd gamepad för simulering" F6 När det är inaktiverat ignoreras gamepad-indata av simulering
Visa eller dölj kontrollpanelen F7
Ställ in tangentbordsfokus på kontrollpanelen F8 Om panelen inte visas för närvarande visas den först.
Docka eller koppla bort panelen till/från emulatorn eller Mixed Reality portalfönstret F9 Om fönstret är stängt när det är odockat är det dockat och dolt.

Se även