Hang használata vegyes valóságú alkalmazásokban

A hanggal tájékoztathatja és megerősítheti a felhasználó alkalmazásállapot-modelljét. Szükség esetén használja a térbelisítést, hogy hangokat helyezzen el a vegyes valóság világában. Ha így csatlakoztatja az auditoryt és a vizualizációt, elmélyítheti az interakciók intuitív jellegét, és növelheti a felhasználók bizalmát.

Mikor kell hangokat hozzáadni?

A vegyes valóságú alkalmazásoknak gyakran nagyobb szükségük van a hangra, mint a 2D-s alkalmazásokra, mivel nem rendelkeznek a megfelelő felülettel. Hangokat adhat hozzá, amikor értesítik a felhasználót, vagy megerősítik az interakciókat.

Tájékoztatás és megerősítés

  • A nem a felhasználó által kezdeményezett események, például az értesítések, a hang használatával tájékoztassa a felhasználót a változásról.
  • Az interakcióknak több szakasza is lehet. Hanggal erősítse meg a fázisváltásokat.

Tekintse meg az alábbi példákat az interakciókra, eseményekre és a javasolt hangjellemzőkre.

Gyakorlat gyakorlata

A felhasználók nem rendelkeznek korlátlan kapacitással a hanginformációkhoz.

  • Minden hangnak konkrét, értékes információkat kell kommunikálnia.
  • Ha az alkalmazás olyan hangot játszik le, amely tájékoztatja a felhasználót, ideiglenesen csökkentse a többi hang mennyiségét.
  • A gombok rámutatási hangja (lásd az alábbi információkat) esetén adjon meg egy késleltetést a túl sok hang aktiválásának elkerülése érdekében.

Ne támaszkodjon kizárólag hangra

A jól használt hangok értékesek a felhasználók számára. Ügyeljen azonban arra, hogy az alkalmazás akkor is használható legyen, ha a hang ki van kapcsolva.

  • Előfordulhat, hogy a felhasználók hallássérültek.
  • Alkalmazása hangos környezetben is használható.
  • Előfordulhat, hogy a felhasználók adatvédelmi aggályokat vagy egyéb okból letiltják az eszközhangot.

Az interakciók zonitálása

A vegyes valóságban az interakciók típusai közé tartozik a kézmozdulat, a közvetlen manipuláció és a hang. Az alábbi javasolt jellemzők alapján válasszon ki vagy tervezsen hangokat ezekhez az interakciókhoz.

Kézmozdulatok interakciói

Vegyes valóságban a felhasználók egérrel is interakcióba léphetnek a gombokkal. A gombműveletek általában akkor fordulnak elő, ha a felhasználó a gombra való kattintás helyett kiadást ad, hogy a felhasználónak lehetősége legyen megszakítani az interakciót. Hangokkal erősítse meg ezeket a szakaszokat. A távoli gombok megcélzásának segítése érdekében érdemes lehet rámutatási hangot használni.

  • A gombnyomási hangoknak rövid, tapintható "kattintásnak" kell lennie.
    Például: MRTK_ButtonPress.wav
  • A gomb-"kinyomás nélküli" hangoknak hasonló tapintatosnak kell lennie. A press() hangnál magasabb hangmagasság erősíti a befejezés érzetét.
    Például: MRTK_ButtonUnpress.wav
  • A hang rámutatáskor fontolja meg egy apró és nem veszélyeztető hang, például egy kis gyakoriságú vagy duális hang használatát.

Közvetlen manipuláció

A HoloLens 2. oldalon a kézkövetés támogatja a felhasználói felület elemeinek közvetlen manipulálását. A hangok akkor fontosak, ha nincs más fizikai visszajelzés.

A gombnyomási hang azért fontos, mert a felhasználó nem kap más jelzést, amikor a billentyűvonás aljára ér. A kulcs utazásának hangjelzői kis méretűek, aprók és eltoltak. A kézmozdulatok interakcióihoz hasonló gombnyomások rövid, tapintható hangot, például egy kattintást is nak kell kapniuk. A kinyomáshoz hasonló kattintási hangnak kell lennie, de emelt hangmagassággal.

Nehéz vizuálisan megerősíteni a be- vagy kiadási műveletet. A felhasználó kezében gyakran bármilyen vizuális hatás létezik, és a nehéz testű objektumok nem rendelkeznek a "megragadás" valós vizuális megfelelőjével. A hangok hatékonyan kommunikálhatnak a sikeres ragadó és kiadási interakciókról.

  • A ragadó műveleteknek egy rövid, némileg hangolt, tapintható hangnak kell lennie, amely arra kéri, hogy zárja be az objektumokat. Néha van egy "kihangolási" hang is, amely a kézmozgást kommunikáló megragadó hanghoz vezet.
    Például: MRTK_Move_Start.wav
  • A kiadási műveleteknek hasonló rövid és tapintható hangnak kell lennie. Általában alacsonyabb a dobás, mint a markolási hang, fordított sorrendben, és hatással van rá, majd egy "who who.", amely közli, hogy az objektum a helyén van.
    Például: MRTK_Move_End.wav

A rajzolási interakciónak állandó, ismétlődő hangot kell kapnia a felhasználó kézmozgása által meghatározott kötethez. Csendesnek kell lennie, ha a kéz még mindig hangos, amikor a kéz gyorsan mozog.

Hang-interakciók

A hang-interakciók gyakran apró vizuális elemekkel is vannak. Hangokkal erősítse meg az interakciós szakaszokat. A kézmozdulatok és a közvetlen manipulációs hangok megkülönböztetésére több tonális hangokat is használhat.

  • A hangparancsok megerősítéséhez használjon pozitív hangvételű hangvételt. A hangszínek és a nagyobb hangintervallumok emelkedése hatékony.
  • Használjon rövidebb, kevésbé pozitív hangvételű hangvételt a hangparancsok sikertelenségére. Kerülje a negatív hangokat. Ehelyett használjon percussivebb, semlegesebb hangot annak kommunikálása érdekében, hogy az alkalmazás továbblép az interakcióból.
  • Ha az alkalmazás ébresztős szóval rendelkezik, használjon rövid, hangvételű hangvételt, amikor az eszköz elkezd figyelni. Használjon kis hurkolású hangot, miközben az alkalmazás figyel.

Értesítések

Az értesítések jelzik az alkalmazás állapotának változásait és a felhasználó által nem elindított egyéb eseményeket. Az állapotváltozások közé tartozhatnak a folyamat befejezései, az üzenetek és a telefonhívások.

Vegyes valóságban az objektumok néha kiesnek a felhasználó nézetmezőjből. Mozgó animált objektumokat párosíthat térbeli hanggal, amely az objektum típusától és sebességétől függ.

  • Az animáció végén térbeli hang lejátszása segít tájékoztatni a felhasználót az objektum új pozíciójáról.
  • A fokozatos mozgáshoz a mozgás közbeni "kihang" hang segít a felhasználónak az objektum nyomon követésében.

Az üzenetértesítési hangokat többször, néha egymás után is hallhatja. Fontos, hogy ne tetszetsen, és ne hangza magát. A középtartomány pozitív tonális hangja hatékony.

  • A bejövő hívási hangoknak hasonló minőségűnek kell lennie, mint egy mobiltelefonos hangnak. Ezek a hangok olyan hurkokat hurkolásnak neveznek, amelyek addig játszanak, amíg a felhasználó meg nem válaszol a hívásra.
  • A hangalapú kommunikációnak és a kapcsolat megszakadásának rövid, tonális hangnak kell lennie. A kapcsolati hangnak pozitív hangvételűnek kell lennie a sikeres kapcsolat jelzésére. A leválasztási hangnak semleges hangnak kell lennie, amely a hívás befejezését jelzi.

Térbelisítések kezelhetők

A térbelisítés sztereotikus mikrofonokat vagy beszélőket használ a hangok a vegyes valóság világában való elhangzására.

Melyik hang hangokat ad térbelisíteni

A hangnak térbelinek kell lennie, ha térbeli helymeghatározással rendelkezik egy eseményhez társítva. Ide tartoznak a felhasználói felület, a megtestesült AI-hangok és a vizuális mutatók.

A felhasználói felület elemeinek térbeli elrendezése a felhasználó sonic "térének" visszatűrésében azáltal, hogy korlátozza a hallatott sztereotikus hangok számát. Az olyan interakciók manipulálása, mint az érintés, a behozás és a kiadható érintés természetesebb, ha a hang-visszajelzés térbeli. Vegye figyelembe az alábbi információkat ezen elemek távolságának enyhítésével kapcsolatban.

Vizualizációs jelzők és megtestesült AI-hangok térbeli megjelenítésével intuitív módon tájékoztathatja a felhasználókat, ha ezek a dolgok nem látómezőn belül vannak.

Ezzel szemben kerülje a térbeli megjelenítést az arc nélküli AI-hangok és más, jól meghatározott térbeli helyet nem eredményező elemek számára. A kapcsolódó vizuális elem nélküli térbeli megjelenítés elvonhatja a felhasználók figyelmét arról, hogy van olyan vizuális elem, amely nem található.

A térbelisítésnek van némi processzorköltsége. Számos alkalmazásnak egyszerre legalább két hangja van. Ebben az esetben a térbelisítés költsége valószínűleg elhanyagolható. Az MRTK képkocka-figyelővel ítélheti meg a térbeli térbeli használat hatásának hatását.

Mikor és hogyan alkalmazható a távolságalapú felügyelet?

A fizikai világban a távolabbi hangok csendesek. A hangmotor a forrás távolsága alapján képes modelleni ezt a enyhítést. A releváns információk kommunikálása során használjon távolságalapú attenuálást.

A vizuális jelzőktől, animált hologramtól és más informatív hangtól való távolság a felhasználó számára fontos. A távolságalapú felügyelet segítségével intuitív módon biztosítson jeleket.

Állítsa be az egyes forráshoz a enyhítő görbét úgy, hogy illeszkedjen a vegyes valóságú világ terének méretére. A hangmotor alapértelmezett görbéje gyakran nagy (akár fél kilométeres) terekhez lett megjelölve.

Olyan hangokat, amelyek megerősítik a gombműveletek és más interakciók progresszív szakaszait, nem szabad enyhítést alkalmazni. Ezeknek a hangoknak a megerősítő hatása fontosabb, mint a gombtól való távolság kommunikálása. A változatok zavaróak lehetnek, különösen billentyűzetek esetében, amikor egymás után sok gombkattintás hallatható.

Melyik térbelisítési technológiát kell használni?

A beszélők vagy HoloLens esetén fejhez kapcsolódó átviteli funkció (HRTF) alapú térbelisítési technológiákat használjon. Ezek a technológiák a fizikai világ fej körüli hangpropagálását modellzik. Még ha egy hangforrás is az ember fejének távoli oldalán van, a hang kismemócsel és késleltetéssel propagál a távoli fülre. A beszélői panning csak a felügyeletre támaszkodik, és teljes enyhítést alkalmaz a bal fülre, ha a hang a jobb oldalon van, és viszont. Ez a technika zavarhatja a "normál hallási" figyelőket, és elérhetetlen lehet az egyik fül hallássérült ének.

Következő lépések