ケース スタディ: よりパーソナルなコンピューティングの追求
今日製品を構築することで、明日のチャンスが広がります。 これらの製品で提供されるソリューションにより、将来の向上のために必要なものが明らかになります。 Mixed Reality を使用することで、特にこれが実現します。実際の仕事 (実際のデバイス、実際の顧客、実際の問題) の実体験から、実践的な洞察が得られます。
私は、Windows Mixed Reality の使用によってエンタープライズ パートナーがビジネス向けエクスペリエンスを構築する上でビジネスを支援する Microsoft のデザイン チームの一員です。 この 1 年間、Microsoft のチームは HoloLens と Microsoft の主要なホログラフィック デバイスが今日のお客様にどのように価値を提供できるかの理解に注力してきました。 チームは、これらの企業のデザイナーや開発者と密接に連携しながら、技術的に不可能、財務的に実用的でない、または HoloLens なしでは不可能なソリューションを見つけることに注力しています。
Western Reserve University のケースからの HoloAnatomy
これらのソリューションを構築することは、Microsoft の内部チームが、次世代のコンピューティングに備えるのに役立ちます。 個人と企業が Mixed Reality、音声、AI などのコア テクノロジと対話する方法を理解することは、Microsoft が開発者向けのより優れたデバイス、プラットフォーム、ツールを構築するのに役立ちます。 デザイナーまたは開発者がこの空間を探索している場合は、チームが現在パートナーから学んでいる内容を理解するのが、明日の Mixed Reality の機会に備える上で不可欠です。
Mixed Reality に対する Microsoft の期待
私たちは、物理的な世界とデジタルという 2 つの世界の中で生きています。 どちらにも、能力を強化および拡張するために活用する基本的な強みがあります。 物理的な感覚を使用して、友人と対人で話したり、ボディ ランゲージなどを理解できる一方で、数マイル離れた友人とビデオチャットし、話す能力を強化したりすることができます。 これまで、これら 2 つの世界とそれぞれの長所は、根本的に分離されてきました。
物理世界は、原子と物質の 1 つです。 私たちは、環境内の物体や人との対話に長年の経験から学習した行動を利用しながら、意思決定のために感覚を使用しています。 これらの対話式操作の容易さにもかかわらず、私たちは物理的な能力と自然法則によって制限されます。
デジタル世界は、ビットとロジックの 1 つです。 計算は即座に行われ、情報を簡単に分散できます。 情報の速度と流れにもかかわらず、対話式操作は多くの場合、小さな画面、抽象入力、ノイズの多いフィードに限定されます。
HoloStudio
物理的な世界とデジタル世界の利点を組み合わせたらどうなるでしょうか。 これは、Mixed Reality の範囲にわたるエクスペリエンスの基になります。物理とデジタルが共に存在し、シームレスに対話する媒介です。 これらの世界を組み合わせることで、より自然にテクノロジと対話するための新しい基盤が構築されます。これは、パーソナル コンピューティングの進化です。
開発者が没入感とプレゼンスの機会を探り始めたので、Mixed Reality の範囲が急増しました。 イマーシブ (仮想現実) エクスペリエンスを使用してユーザーをデジタル世界に取り込み、ホログラフィック (拡張現実) エクスペリエンスを使用して物理世界でデジタル オブジェクトを作成します。 しかし、物理世界をデジタル世界にマッピングする利点は何でしょうか。 コンピューターに目を付けるとどうなるでしょうか。
ホログラムの背後にある基本的なカメラ ビジョン テクノロジは、コンピューターが周囲の環境である世界のオブジェクト、周囲の人、変化の起き方を見るための一対の目のように機能します。 物理的な世界におけるコンテキストを、デジタル的に理解します。 そうすることで、まだそこから暗示されるものを理解し始めたばかりの、膨大な量の情報が得られることに繋がります。
コア テクノロジを結集する
コンピューティングは、多くの場合、実質的なものです。 デバイスを手にして、自分が誰で、どうしたいかを伝えます。 コンピューターが理解できると我々が考える方法に合わせて、自分の考えと話し方を調整します。
Mixed Reality (特にホログラフィック エクスペリエンスを使用する現実世界) に期待されるのは、テクノロジとの対話処理の負担を軽減する方法です。 ユーザーが現在のコンピューティングに固有の抽象化のレイヤー間を移動する場合の認知負荷を軽減します。 コンテキストの理解を活用するだけでなく、分析情報を引き出してアクションを実行しやすくするエクスペリエンスを設計するには、どうすれば良いでしょうか。 この問題を解決するために、次の 2 つの貢献するテクノロジも試みられています。
- 音声は、音声と会話の観点から、ユーザーがより自然な手段 (テキストを介してボットに応答するか、会話ハードウェアにコマンドを発行する) を通じてコンピューターと通信できます。
- AI は、ますます複雑化するデータセットから分析情報を引き出す能力を提供するエクスペリエンスです。 AI は非常に大きなトピックですが、最近の進歩により、コンピューター ビジョン、より自然なデジタル アシスタント、ユーザーへのアクションの推奨に依存するデバイスの下地が提供されています。
Mixed Reality は、これらのテクノロジを 1 つのユーザー エクスペリエンスに結合する媒体を提供します。 ホログラフィック ヘッドセットを装着すると、音声は強力で自然な入力方法になります。 AI は、物理世界とデジタル世界を結ぶ膨大な量の情報をコンテキスト化するための重要な暗号として機能します。 これが、Satella Nadella が HoloLens を「究極のコンピューター」と呼んだ理由です。これは、3 つのコア テクノロジの最高のデバイスです。 ますます複雑化するデバイスやサービスとの対話を人間が容易に行えるプラットフォームです。
向き合うインターフェイスが減る
物理世界をデジタル世界に接続する最高のデバイスを使用すると、面倒な抽象化を行わずに、より自然に適合するエクスペリエンスを設計できます。 作成したエクスペリエンスについて考えてください。抽象化の障壁が取り除かれると、インターフェイスはどの程度残るでしょうか。 ユーザーとそのコンテキストがわかっている場合、アプリ フローのどの部分が変更されるでしょうか。 残るメニューとボタンの数はどれ位でしょうか。
たとえば、科学者向けに構築された OnSight ツールである NASA の Jet Propulsion Laboratory のような Mixed Reality での共有エクスペリエンスについて考えます。 火星データを見るシステムを構築する (画面またはディスプレイにデータを抽象化する) 代わりに、科学者をデータ内に取り込み、共同作業を行う間に効果的に火星の表面に科学者を配置しました。
NASA/JPL OnSight
ある火星地質学に注目させるボタンを見つける代わりに、科学者はボタンを直接指し示す可能性があります。 メニューはなく、ペンはなく、ツールを効果的に使用するための学習曲線はありません。 物理世界からの既知の能力を活用することで、Mixed Reality はより自然な対話式操作を実現し、最も高度な業界ツールであっても技術的な深い教育の必要を解消できます。
同様に、音声と AI は、このようなエクスペリエンスにおける自然な対話式操作を拡張できます。 デジタル アシスタントが私たちの周りの世界に "見える" とき、会話が面倒だと感じなくなるでしょう。 NASA のツールのボットは、科学者がジェスチャを示し、「これ」や「あれ」について尋ねる際に、準備が整った (会話的な) 情報ソースとして機能する、火星地質学を相談する科学者からコンテキストを抽出できる可能性があります。 コンテキストを知っているコンピューターは、コンテキストに最も適した対話式操作の方法を使用して、ユーザーに適した情報を取得できます。
基盤の上に構築する
このコンテキスト エクスペリエンスの世界では、ユーザーのモビリティに対応する方法が重要です。 高度にパーソナライズされたコンテキストを使用してデバイスとサービス間を流動的に移動すると、ユーザーは物理的な世界をシームレスに移動し、"大規模な" プラットフォームの課題を生み出します。 物理的な世界がデジタル エンド ポイントになると、相互運用性は大きな意味を持つものになります。
「デジタル宇宙と物理世界を組み合わせて、人間の可能性を解き放つ... 地球のすべての人と組織が、より多くの成果を達成できる」
— Satya Nadella
Windows Mixed Reality は、デバイスのエコシステム用のプラットフォームを作成する取り組みであり、開発者は、可能な限り多くのユーザーに対して、イマーシブで手頃な価格の互換性のあるエクスペリエンスを作成できます。 将来は、単一の製造元に限定されるのではなく、まして単一のデバイスに限定されることもありません。 ヘッドセット、モバイル デバイス、PC、アクセサリなど、 これらすべての物理的なものは、Mixed Reality の期待を正しく実現するために、基になるプラットフォームを介して (グラフやサービスなどのデジタルなものと同様に) 協調して動作するようになるはずです。
明日のエクスペリエンスのために、今日デザインする
この新しいクラスのエクスペリエンスの背後にあるコア テクノロジのそれぞれが、デザイナーと開発者が、今すぐ魅力的で成功したエクスペリエンスを作成することを可能にしています。 抽象化を減らすことで、デジタルの世界とより直接的に対話し、人間の能力を強化および増幅する方法で設計することができます。 (ボットや Cortana のようなデジタル アシスタントを通じて) 音声テクノロジを使用すると、ユーザーはますます複雑な会話やシナリオを実行できます。一方、AI テクノロジ (Microsoft Cognitive Services のようなツールを通じて) により、企業は、ユーザーがソーシャル メディアからサプライ チェーン管理までのあらゆるものと対話する方法を再考しています。
これらの種類の対話式操作は、新しいクラスの設計ツールと、プラットフォームからの基本的なサポートの両方に依存します。 これらのツールを作成し、デバイスとサービス用にこのプラットフォームを構築するには、明日のエクスペリエンスが実際の具体的な問題を解決する方法を理解する必要があります。 エンタープライズ パートナーが貴重なソリューションを提供し、継続的な投資が、この新しいクラスのコンピューティングに備えるのに役立つと考える、好機がある領域を 5 つ特定しました。
好機がある領域
過去 1 年間の開発者パートナーシップにより、お客様と共鳴するチャンスがあり、成功するエンタープライズ ソリューションを生み出す可能性がある領域が明らかになりました。 科学者や技術者からデザイナーやクライアントまで、Microsoft パートナーが Mixed Reality の価値を見つける好機がある 5 つの領域が浮かび上がりました。 これらの領域は、Windows Mixed Reality などのプラットフォームの将来のニーズに関する大きな洞察を既に提供しており、これらの新しいエクスペリエンスが、学習、共同作業、コミュニケーション、作成の方法に与える影響を理解するのに役立ちます。
1. 作成とデザイン
Mixed Reality の主な機会の 1 つは、実世界の環境で、現実のサイズとスケールで 3D デザインをリアルタイムで表示および操作する機能です。 デザイン ツールとプロトタイプ作成ツールは、画面の制限を逃れ、通常は木や石などの具体的な物理的な素材用に予約されているデザインの領域に戻ります。
Autodesk は、製品開発プロセス全体のコラボレーションを改善することを目的とした Mixed Reality エクスペリエンスを作成しました。 エンジニアやデザイナーが環境内の 3D モデルを調査して書き込む機能により、デザインをリアルタイムで反復できます。 これにより、より高速なプロトタイプ作成が可能になっただけでなく、プロセスにおけるより自信に満たされた意思決定が可能になります。
このようなエクスペリエンスでは、ユーザーが共有オブジェクトを表示して対話するための主要なコラボレーション エクスペリエンスの必要性が強調されています。 Autodesk の目標は、デザイン プロフェッショナルやエンジニアから、デジタル アーティスト、学生、趣味人までに製品を拡張することです。 ユーザーの 3D の専門知識のレベルが下がるにつれて、当然オブジェクトと対話する機能が重要になります。
2. 組み立てと製造
工場での特殊化の増加からサプライ チェーン管理の急速な進歩まで、関連情報へのシームレスなアクセスが重要になります。 Mixed Reality は、広範なデータ セットを合成し、ナビゲーションや操作などの領域に役立つビジュアルの表示を提供する機能を提供します。 これらは、多くの場合、複雑さを軽減し、エクスペリエンスを向上させるために、カスタム データセットとサービスとの統合が重要な、非常に技術的で優れたニッチなフィールドです。
エレベーター製造業者である ThyssenKrupp は、エレベーター サービス技術者向けのエクスペリエンスを作成し、ジョブの準備に関する問題を視覚化して特定できるようにしました。 24,000 名の技術者を超えるチームで、HoloLens のようなデバイスによって、技術者は技術情報や専門知識の情報にリモートで自由にアクセスできます。
ThyssenKrupp は、コンテキストに関連する重要な情報をユーザーに迅速に配信できるという強力な概念を強調しています。 今後の新しいクラスのエクスペリエンスに備え、ユーザーに関連性の高いコンテンツに可能なかぎり多くの情報を抽出することが重要です。
3. トレーニングと開発
3 次元でのオブジェクトと情報の表現は、シナリオを視覚的に説明し、空間を理解する新しい方法を提供します。 トレーニングは、大量の複雑なオブジェクト (ジェット エンジンなど) をデジタル的に表現して、物理ソリューションのコストのごく一部に対するトレーニング シミュレーションを作成する機能を活用できる、好機がある重要な領域になります。
日本航空は、エンジン力学と搭乗員のための補足トレーニングを提供するための概念プログラムを試しています。 大規模なジェット エンジン (サイズと複雑さの両方) は 3D で表すことができます。物理的な世界の制限を無視することで、受講者の周辺で仮想オブジェクトを移動および回転させ、航空会社のコンポーネントがリアルタイムで動作する様子が見られます。
仮想コンポーネントによるトレーニング (コストのかかる物理トレーニング シミュレーターの必要性の軽減) は、今日のエンタープライズ シナリオで価値を提供するための重要な方法です。 このシナリオが拡張されると (医療などの分野で見たように)、コンピューター ビジョンは、環境内の一意のオブジェクトを認識し、ユーザーのコンテキストを理解し、関連する指示を提供するために特に重要になります。
4. コミュニケーションと理解
2 人のユーザー間の対話 (両方の参加者が Mixed Reality デバイスにあるか、一方が従来の PC または携帯電話にあるか) は、新しい環境内の没入感、または他のユーザーと実質的にコミュニケーションするときの存在感の両方を提供できます。 エンタープライズ シナリオでは、この存在感はモバイル チームにとって非常に便利であり、プロジェクトの理解を深め、出張の必要性を減らすことができます。
商用の技術メーカー Trimble は、ビル開発時に共同作業を行ったり、作業をレビューしたりするための建築および建設業界の専門家向けのソリューションを開発しました。 専門家は、プロジェクトにリモートで入り、進行状況について話し合うか、現地に行って、環境内で (最終的な形式で) 見る形で計画を見直せます。
共有エクスペリエンスは Microsoft の大きな投資分野であり、Skype のようなアプリでは、デジタル スペースで人間を表す新しい方法を探しています。 Teams は、容量ビデオの記録、アバター、参加者の物理的なスペースの再作成を探索しています。
5. エンターテイメントとエンゲージメント
Mixed Reality の没入の性質は、お客様がエンターテイメントやマーケティングに関与する方法に大きな影響を与える可能性があります。 アーティストやエンターテインメント スタジオは、物語性と説得力のある媒介として Mixed Reality を調査していますが、企業はブランド マーケティングに対する影響を調べています。 プライベート ショールームの製品デモから、見本市で話されるビジョンまで、コンテンツをよりイマーシブでカスタマイズした方法で配信できます。
Volvo は、最新の自動車モデル (さまざまな色と構成にユーザーを没入させる) を紹介しながら、高度なセンサーがどのように動作し、より優れた安全な運転体験を作成するかを強調するエクスペリエンスを作成しました。 Volvo はガイド付きプレゼンテーション ルームのエクスペリエンスをお客様に案内することで、最新車の機能の背景を語り、自社のブランド ストーリーを印象づけることができます。
エンターテインメントは、さまざまな方法で Mixed Reality (特に仮想現実) の境界をプッシュしています。また、この分野で最も説得力のあるものは、コミュニケーションと理解という従来の好機がある領域と連携する方法であると考えられます。 複数のユーザーがそれぞれ独自のデバイスとインターフェイス メソッドを使用しているため、エンターテイメント分野でのパーソナル化の未来を想像できます。
今日から構築を開始する
コンシューマーにとっては、これまでの Mixed Reality の未来がどのようになるかを説明するのは困難ですが、固有の問題に焦点を当てること、実際のハードウェアを使用し、"今日" 実験を行い、Mixed Reality、音声、AI の共通部分を活用することが重要です。 Microsoft では、Mixed Reality を扱い始めるだけでなく、今日の企業によって実現される成功から学ぶことで、人々の明日のエクスペリエンスの構築に役立てようとしています。
次の探索チェックポイント
私たちが用意した探索ツアーを進んでいる場合、あなたの現在地は Mixed Reality の基本の探索の中盤の段階です。 ここから、次の基本トピックに進むことができます。
または、Mixed Reality コア エクスペリエンスをすぐに開始できます。
筆者について
 |
Mark Vitazko UX デザイナー @Microsoft |