Anders denken für Mixed Reality

Als Microsoft 2016 den HoloLens (1. Generation) für begierige Entwickler gestartet hat, hat das Team bereits mit Studio-Partnern innerhalb und außerhalb von Microsoft zusammen gearbeitet, um die Starterfahrungen des Geräts zu erstellen. Diese Teams haben ihr Wissen in der Praxis erworben und auf dem neuen Gebiet des Mixed Reality-Entwurfs sowohl Chancen als auch Herausforderungen kennengelernt.

Wir haben ihre Methoden und Erkenntnisse in einen Stundenplan umgedreht, in dem wir neue Entwickler in unserer Mixed Reality Academy Mixed Reality. Der Workshop umfasst wochenlange Entwurfsworkshops, die wir unseren Partnern anbieten.

Im Folgenden finden Sie eine Momentaufnahme aller Informationen, die wir gelernt haben, um unsere Unternehmenspartner bei der Vorbereitung ihrer Teams auf die Mixed Reality-Entwicklung zu unterstützen. Obwohl viele dieser Methoden ursprünglich auf die entwicklung HoloLens sind die Vorstellung und Kommunikation in 3D für das gesamte Spektrum der Mixed Reality-Erfahrungen von entscheidender Bedeutung.

Räumliches Denken während des Entwurfsprozesses

Jeder Entwurfsprozess oder Jedes Entwurfsframework soll das Denken iterieren: Um ein Problem umfassend zu lösen, Ideen effektiv mit anderen zu teilen, diese Ideen zu bewerten und eine Lösung zu finden. Heute verfügen wir über bewährte Entwurfs- und Entwicklungsmethoden zum Erstellen von Erfahrungen auf Desktops, Smartphones und Tablets. Teams haben klare Erwartungen, was erforderlich ist, um eine Idee zu iterieren und sie in ein Produkt für Benutzer zu verwandeln.

Teams bestehen häufig aus einer Mischung aus Entwicklung, Entwurf, Forschung und Verwaltung. Alle Rollen sollten am Entwurfsprozess teilnehmen. Die Barriere für den Einstieg in eine Idee für eine mobile App ist so einfach wie das Zeichnen eines Rechtecks für den Bildschirm des Geräts. In der Zwischenzeit reicht das Skizzieren von Benutzeroberflächenelementen mit Feldern und Linien aus, um technische Anforderungen festzulegen oder potenzielles Benutzerverhalten zu definieren.

Bei Mixed Reality beginnt der herkömmliche 2D-Entwurfsprozess zu zerlegen. Das Skizzieren in 3D ist für die meisten Personen schwierig, und die Verwendung von 2D-Tools wie Stift und Papier oder Whiteboards kann ideenreich auf diese Dimensionen beschränken. In der Zwischenzeit erfordern 3D-Tools, die für Spiele oder Entwicklung entwickelt wurden, ein hohes Maß an Fähigkeiten, um schnell Ideen zu entwickeln. Der Mangel an einfachen Tools wird durch die technische Ununsicherheit neuer Geräte noch immer noch mit grundlegenden Interaktionsmethoden verbunden. Diese Herausforderungen können möglicherweise die Entwurfsbeiträge für Teammitglieder mit 3D-Entwicklungshintergrund einschränken, was die Iterationsfähigkeit des Teams drastisch reduziert.

Teams während eines Workshops in der Mixed Reality Academy
Teams aus dem Mixed Reality Partner-Programm in unserem Workshop

Wenn wir mit externen Partnern zusammenarbeiten, hören wir Berichte von Teams, die darauf warten, dass der Entwickler den Prototyp fertig stellen kann, bevor er seinen Entwurfsprozess fortsetzen kann. Der Rest des Teams kann dann möglicherweise keine sinnvollen Fortschritte im Produkt machen. Entwickler sind am Ende in der Verantwortung, sowohl die technische Implementierung als auch die Benutzererfahrung zu lösen, wenn sie versuchen, eine grobe Idee in Den Code zu schreiben.

Techniken zum Erweitern des Entwurfsprozesses

Unsere Teams bei Microsoft verfügen über eine Reihe von Techniken, um ihr Team effektiver zu umfassen und komplexe Entwurfsprobleme schnell zu iterieren. Obwohl es sich nicht um einen formalen Prozess handelt, sollen diese Techniken Ihren Workflow ergänzen und nicht ersetzen. Mit diesen Methoden können Teammitglieder ohne spezielle 3D-Fähigkeiten Ideen anbieten, bevor sie in die Prototypphase einspringen. Unterschiedliche Rollen und Disziplinen können Teil des Entwurfsprozesses sein, nicht nur 3D-Designer und Entwickler. Das Aufdecken von Möglichkeiten und identifizieren mögliche Herausforderungen kann später in der Entwicklung auftreten.

Techniken für den Entwurfsprozess

Generieren von Ideen mit Bodystorming

Die Entwicklung innovativer Mixed Reality-Erfahrungen ist entscheidend, damit Ihr Team über Ereignisse in der realen Welt hinaus– über die herkömmliche Welt der 2D-Geräte hinaus – nachdenken kann. Bei Microsoft haben wir die besten Ergebnisse erzielt, indem wir die Interaktion mit physischen Eigenschaften in einem realen Raum fördern. Mit einfachen, kostengünstigen Materialien erstellen wir physische Eigenschaften, um digitale Objekte, Benutzeroberflächen und Animationen in einer vorgeschlagenen Benutzeroberfläche zu darstellen. Diese Technik wird als Bodystorming bezeichnet und ist seit Jahrzehnten ein Heft der Produktidee im Industrieentwurf.

Teams arbeiten mit Materialien in der Mixed Reality Academy Simple, kostengünstigen Artefakten, die in bodystorming verwendet werden

Einfache, physische Eigenschaften ermöglichen es Personen mit unterschiedlichen Fähigkeiten und Hintergründen, Ideen einzubringen und Mixed Reality-Erfahrungen inhärente Möglichkeiten zu entdecken, anstatt sich in 2D-Gedanken einzubringen. Während die technische Prototyperstellung oder das High-Fidelity Storyboarding einen 3D-Entwickler oder -Interpreten erfordert, können einige Styrofoam-Kugeln und -Kasten ausreichen, um zu zeigen, wie sich eine Schnittstelle im physischen Raum entwickeln kann. Diese Techniken gelten sowohl für die Mixed Reality-Entwicklung HoloLens immersive Headsets. Beispielsweise kann eine Reihe von Konnektoren grob die Größe von Hologrammen veranschaulichen, die in einer HoloLens-Umgebung oder als "Props" für interaktionsfähige Elemente oder Bewegungsentwürfe in einer virtuellen Welt angezeigt werden.

Bodystorming ist eine Technik, die verwendet wird, um schnell Ideen zu generieren und Ideen zu bewerten, die für den Prototyp zu nebulbel sind. Bei Microsoft wird Bodystorming am häufigsten verwendet, um schnell eine Idee zu finden. Sie kann auch dabei helfen, eine detailliertere Sitzung zu hosten, wenn Sie externe Projektbeteiligten einbeziehen, die nicht mit der Mixed Reality-Entwicklung vertraut sind oder umfassende Szenarien abspielen müssen. Denken Sie daran, dass der Zweck von Bodystorming die schnelle und effiziente Idee ist, indem die Teilnehmer zum räumlichen Denken ermuntert werden. Detaillierte Grafiken oder präzise Messungen sind in dieser Phase nicht wichtig. Physische Eigenschaften müssen nur die Mindestanforderungen erfüllen, um eine Idee zu untersuchen oder zu kommunizieren. Es wird nicht erwartet, dass Ideen, die durch Bodystorming präsentiert werden, vollständig geprüft werden, aber der Prozess kann dazu beitragen, die Möglichkeiten für tests zu einem späteren Zeitpunkt während der Prototyperstellungsphase auf dem Gerät einzubringen. Daher ersetzt Bodystorming nicht die technische Prototyperstellung, sondern gleicht den Aufwand aus, während der Prototyperstellungsphase sowohl technische als auch Entwurfsherausforderungen zu lösen.

Feedback zu Handeln und Experten

Nach dem Bodystormingprozess der Idee mit physischen Objekten in der realen Welt besteht der nächste Schritt im Durchgang durch eine Erfahrung mit diesen Objekten. Diese Phase des Prozesses wird als "handelnd" bezeichnet und umfasst häufig das Staging, wie sich ein Benutzer durch die Benutzeroberfläche oder eine bestimmte Interaktion bewegen würde.

Teams eines Szenarios während eines Workshops in der Mixed Reality Academy
Teams eines Szenarios während eines Workshops

Das Handeln mit physischen Eigenschaften ermöglicht es den Teilnehmern, die Perspektive des Benutzers zu erleben, während externe Beobachter sehen können, wie Ereignisse abspielt. Dies ist ein idealer Zeitpunkt, um eine größere Zielgruppe von Teammitgliedern oder Projektbeteiligten einzuholen, die spezifisches "Expertenfeedback" bereitstellen können. Wenn Sie z. B. eine Mixed Reality-Erfahrung untersuchen, die für Krankenhäuser konzipiert ist, kann die Umsetzung Ihrer Gedanken für medizinisches Fachpersonal Ihnen wertvolles Feedback liefern. Ein weiteres Beispiel ist eine bestimmte Herausforderung, die Sie zu verstehen versuchen, z. B. räumliche Audiodaten oder die Budgetierung für die Ressourcenqualität im Vergleich zur Leistung. In diesen Fällen erhalten Experten durch ihr Handeln ein schnelles, grobes Konzept, wie sich die Erfahrung entwickeln könnte, ohne dass ein gerätebasierter Prototyp benötigt wird.

Diese Art von Handeln wird nicht formalisiert, und es ist nicht erforderlich, professionelle Talente zu gewinnen, aber in Situationen, in denen wir das Denken mit anderen teilen möchten, die nicht vorhanden sind, zeichnen wir eine "Szene" der Interaktion auf oder schließen einen Storyboard-Interpreten ein, um wichtige Augenblicke zu beobachten und zu skizzieren. Das Handeln kann auch eine einfache Aktivität sein, die häufig während der Bodystormingphase in der In-The-Mail-Phase stattfindet. Die Entscheidung, welche Methode verwendet werden soll, hängt von der Zielgruppe und der Genauigkeit ab, die erforderlich ist, um die entsprechende Art von Feedback einzuholen. Letztendlich geht es darum, was das Denken Ihres Teams am effektivsten erfassen wird.

Erfassen von Ideen mit Storyboards

Die beste Methode, um die Ideen und Konzepte Ihrer vorgeschlagenen Erfahrung zu vermitteln, hängt von Ihrer vorgesehenen Zielgruppe und dem Feedbacktyp ab, den Ihre nächste Iteration erfordert. Wenn Teammitgliedern neue Ideen präsentiert werden, können Neuinszenierungen von Bodystorming mit geringer Genauigkeit ausreichen, um eine Person auf den Aktuellen zu bringen. Bei der Einführung Ihrer Erfahrungskonzepte für neue Projektbeteiligten oder potenzielle Benutzer ist das Storyboarding häufig die beste Methode. Storyboarding ist eine Technik, die in der Unterhaltungsbranche üblich ist und sich im Hintergrund in der Entwicklung von Filmen und Spielen befindet. Die Technik hilft dabei, sowohl den gesamten Ablauf einer Erfahrung (bei geringer Genauigkeit) als auch das aussehende Aussehen und Erscheinungsbild (bei hoher Genauigkeit) zu vermitteln. Wie bei der Prototyperstellung ist das Verständnis der Genauigkeitsanforderungen Ihres Storyboards entscheidend, um das richtige Feedback zu sammeln und kontraproduktive Diskussionen zu vermeiden.

Beispiel für ein Storyboard mit geringer Genauigkeit
Beispiel für ein Storyboard mit geringer Genauigkeit

Storyboards mit geringer Genauigkeit sind die richtige Genauigkeit für schnelle Diskussionen, insbesondere bei der Vermittlung von Ideen auf hoher Ebene. Diese können so einfach sein wie Ziehpunktzeichnungen und primitive Formen, um virtuelle Elemente in einer Szene oder die Nähe interaktiver Komponenten (physisch und virtuell) zu bezeichnen. Obwohl diese angesichts der relativen Einfachheit und der geringen Qualifikationsbarriere für die Ausführung nützlich sind, denken Sie an die Lektion aus bodystorming: Nicht jeder kann 2D-Darstellungen einer Erfahrung sehen und die 3D-Auswirkungen verstehen.

Beispiel für ein High-Fidelity-Storyboard
Beispiel für ein High-Fidelity-Storyboard

High-Fidelity Storyboards sind ein leistungsstarkes Tool, wenn sie neue Projektbeteiligten einbeziehen oder Erkenntnisse aus einer Bodystormingsitzung mit der vorgeschlagenen ansprechenden Richtung Ihrer Erfahrung kombinieren. Storyboards können aus Boards aufbauen, um die endgültige Darstellung einer virtuellen Umgebung zu veranschaulichen, und wichtige Augenblicke erfassen, die für das endgültige Produkt entscheidend sein können. Denken Sie daran, dass Hochgenauigkeits-Storyboards häufig einen Interpreten erfordern, insbesondere eines, das in das Team eingebettet ist und schwer zu beschreibende Ideen erfassen kann. Bei Microsoft haben wir unseren Mixed Reality-Teams Storyboard-Besucher hinzugefügt, die häufig mit Hintergründen in der Spieleentwicklung arbeiten und besprechungen, die darauf vorbereitet sind, Sketche schnell zu erfassen, die später in Simulierte mit höherer Genauigkeit erweitert werden. Diese Personen arbeiten eng mit technischen Leitern zusammen und helfen dabei, die entgegengesetzte Richtung der Ressourcen zu vermitteln, die in der letzten Erfahrung verwendet werden.

Entwurfsprozess

Unser Prozess beginnt heute mit Whiteboarding und Sticky Notes und erweitert sich in physisches Bodystorming und Handeln. Anschließend übersetzen wir dieses Denken in Storyboards und etwas, das wir als "Einzeilenkonzept" bezeichnen (den satz auf hoher Ebene, der beschreibt, was wir machen), bevor wir mit der Prototyperstellung und der Erstellung von Ressourcen fahren. Unsere Entwurfsarbeit ist oft physisch, bevor wir in die Entwicklungsphase kommen.

Ablauf des Entwurfsprozesses 1
Gesamter Entwurfsprozess

Der Entwurfsprozess ist unbischen, und jedes Team ist anders. Methoden wie Bodystorming, Acting und Storyboarding können jedoch helfen, Iterationsschwierigkeiten zu lösen.

Ablauf des Entwurfsprozesses 2
In Wirklichkeit sind die kontinuierlichen iterativen Phasen

Erweitern der Fähigkeiten Ihres Teams

Die Änderung Ihres Prozesses zur besseren Aufnahme von Mixed Reality-Erfahrungen hängt davon ab, dass technische und Entwurfsrollen enger miteinander verbunden sind. Bei der Zusammenarbeit mit Partnern bei Microsoft haben wir gesehen, wie mehrere Teams erfolgreich in die 3D-Entwicklung überwechseln, und wir stellen fest, dass der größte Vorteil daraus entsteht, dass Teammitglieder ihre Komfortzone verlassen und Qualifikationen entwickeln, die ihnen mehr Beteiligung während des Entwicklungsprozesses geben (und nicht nur ihre Fähigkeiten auf Entwurf oder Entwicklung beschränken).

Feedback und Iteration sind für jeden erfolgreichen Entwurf von entscheidender Bedeutung. Bei Mixed Reality-Erfahrungen verfing sich diese Art von Feedback häufig zu technischen Konzepten, insbesondere angesichts der relativen Parallelität der Mixed Reality-Technologie und -Tools. Durch die Entwicklung der Fähigkeiten Ihres Entwurfsteams in technischen Bereichen, einschließlich Fähigkeiten mit Tools wie Unity oder Unreal, können diese Personen den Ansatz von Entwicklern besser verstehen und effektiveres Feedback während der Prototyperstellung bereitstellen. Ebenso können Entwickler, die die grundlegenden UX-Konzepte von Mixed Reality-Umgebungen (und potenzielle Entwurfsfalls) verstehen, ihnen helfen, Implementierungserkenntnisse in den frühen Phasen der Planung bereitzustellen.

In der Regel erhalten wir Fragen von Partnern, die in Mixed Reality arbeiten, darüber, wie sie ihr Team und ihre Skillsets mit 3D-Tools am besten erweitern können. Dies ist eine schwierige Frage, die angesichts des Zustands der Branche beantwortet werden kann, da Teams damit konfrontiert sind, die Erfahrungen von morgen mit den Tools von heute zu erstellen. Viele Teams sammeln Einzelpersonen mit Hintergründen in Denk- und Unterhaltungsbranche, in denen die 3D-Entwicklung seit Mehreren Jahren eine Feste ist. Teams ermutigen auch ihre vorhandenen Teams, Tools wie Unity und 3D-Modellierungssoftware zu nutzen. Obwohl dies beide grundlegende Anforderungen sind, um die Grundlinien von Mixed Reality-Erfahrungen heute zu erfüllen, wird es wahrscheinlich eine große Anzahl von spezialisierten Tools und Qualifikationen geben, um die grundlegenden Anwendungen von morgen zu erstellen.

Der Bereich des Mixed Reality-Designs ändert sich ständig, wobei der Fokus mehr auf Daten- und Clouddiensten in holografischen Erfahrungen liegt. Diese nächste Generation von Erfahrungen nutzt die erweiterte Verarbeitung natürlicher Sprache und das Echtzeit-Computerbild sowie soziale Szenarien innerhalb immersiver Erfahrungen. Beispielsweise ermöglichen Erfahrungen in der virtuellen Realität Designern, einfallsreiche Umgebungen und Räume zu erstellen, die ein Qualifikationsset erfordern, das eher der Architektur oder Demos als dem herkömmlichen Schnittstellenentwurf ähnelt. Sie können auch Erfahrungen in der realen Welt mit HoloLens in Betracht ziehen, bei denen die Anwendungsfälle häufig hochspezialisierte Felder wie die Medizinische, Technische oder Fertigungsindustrie umfassen, in denen bestimmte Umgebungen und Echtzeitdaten wesentliche Elemente der Erfahrung sind. Rollenübergreifendes Arbeiten mit Entwurfs- und spezialisiertem Wissen sowie die Bereitschaft, neue Tools zu erlernen, sind für Teams, die in Mixed Reality arbeiten, von großer Bedeutung.

Unterstützung Ihres Teams bei der schnellen und effektiven Erkundung von Mixed Reality

In den frühen Tagen der HoloLens wurden diese Techniken aus der Notwendigkeit, da sich die frühe Prototyphardware des Geräts als weniger als ideales Format für das schnelle Durchlaufen von Entwurfsideen herausstellte. Interaktionsmethoden, einschließlich der grundlegenden Benutzeroberfläche im Betriebssystem, wurden mit Bodystorming untersucht, während das Handeln unserem Benutzerfreundlichkeitsteam half, grundlegendes Benutzerverhalten für Szenarien am Arbeitsplatz zu verstehen. Am Ende hat das Team eine starke Baseline für die HoloLens Kernbenutzererfahrung eingerichtet, die Konzepte über Teamrollen hinweg kommuniziert und es der Betriebssystementwicklung ermöglicht, sich schnell parallel zur Hardwareentwicklung zu bewegen.

Workshopmaterial in der Mixed Reality Academy

Unabhängig davon, ob es sich um Bodystorming, Handeln, Überprüfen mit Experten oder Storyboarding handelt, sollen Sie mit diesen Techniken Zeit und Aufwand sparen. Wir befinden uns zwar noch sehr in den frühen Tagen der Entwicklung von HoloLens und virtuellen Realität, aber die Erweiterung Ihres Entwurfsprozesses für Mixed Reality hilft Ihrem Team, seine Energie damit zu verbringen, neue und anspruchsvolle Entwurfsprobleme zu untersuchen, anstatt Schwierigkeiten bei der Kommunikation von Ideen zu lösen.

Beispielliste der Workshopmaterialien

Einfache Art-Supplies bieten Teammitgliedern die erforderlichen Tools, um Ideen ohne erweiterte Fähigkeiten zu erläutern. Hier sehen Sie ein Beispiel dafür, was unser Team häufig beim Bodystorming verwendet:

  • Styrofoam-Datenträger
  • Styrofoam-Cubes
  • Styrofoam-Kegel
  • Styrofoam-Kugeln
  • Kästchen
  • Wickel
  • Lollipop-Sticks
  • Cardstock
  • Papierbecher
  • Klebeband
  • Klebeband
  • Schere
  • Paperclips
  • Einreichen von Klammern
  • Post-Its
  • Bindfäden
  • Bleistifte
  • Sharpies

Nächster Erkundungsprüfpunkt

Herzlichen Glückwunsch! Sie haben den Kern der Mixed Reality Discovery Journey abgeschlossen! Sie können entweder sehen, wie Branchenpartner Mixed Reality verwenden, die HoloLens erkundenoder Ihre Entwurfs- oder Entwicklungs journeys starten: