O que é a realidade mista?

A realidade mista é a próxima onda na computação a seguir mainframes, PCs e smartphones. A realidade mista está a ser mainstream para consumidores e empresas. Liberta-nos de experiências ligadas ao ecrã, oferecendo interações instintivas com dados nos nossos espaços de vida e com os nossos amigos. Os exploradores online, em centenas de milhões em todo o mundo, experimentaram realidade mista através dos seus dispositivos portáteis. A AR móvel oferece as soluções de realidade mista mais populares atualmente nas redes sociais. Pessoas podem nem perceber que os filtros de AR que utilizam no Instagram são experiências de realidade mista. Windows Mixed Reality leva todas estas experiências de utilizador para o próximo nível com representações holográficas impressionantes de pessoas, modelos 3D holográficos de alta fidelidade e o mundo real à sua volta.

Aponte e consolide com as mãos no HoloLens 2

A realidade mista é uma mistura de mundos físicos e digitais, desbloqueando interações humanas, informáticas e ambientais 3D naturais e intuitivas. Esta nova realidade baseia-se em avanços na imagem digitalizada, processamento gráfico, tecnologias de apresentação, sistemas de entrada e computação na cloud. O termo "realidade mista" foi introduzido num artigo de 1994 por Paul Milgram e Fumio Kishino, "A Taxonomy of Mixed reality Visual Displays". O seu trabalho explorou o conceito de continuidade de virtualidade e a taxonomia das apresentações visuais. Desde então, a aplicação da realidade mista foi além das apresentações para incluir:

  • Compreensão ambiental: mapeamento espacial e âncoras.
  • Compreensão humana: controlo manual, controlo ocular e entrada de voz.
  • Som espacial.
  • Localizações e posicionamento em espaços físicos e virtuais.
  • Colaboração em recursos 3D em espaços de realidade mista.

A imagem do espectro da realidade mista
Imagem: a realidade mista é o resultado da mistura do mundo físico com o mundo digital.



Introdução e perceção ambiental

Nas últimas décadas, a relação entre humanos e computadores continuou a evoluir através de métodos de entrada. Surgiu uma nova disciplina conhecida como interação homem-computador ou "HCI". As entradas humanas podem agora incluir teclados, ratos, toque, tinta digital, voz e controlo esquelético kinect .

Os avanços nos sensores e no poder de processamento estão a criar novas percepções do computador dos ambientes com base em métodos de entrada avançados. É por isso que os nomes de API no Windows que revelam informações ambientais são denominados APIs de percepção. As entradas ambientais podem capturar:


Diagrama venn que mostra interações entre computadores, humanos e ambientes
Imagem: As interações entre computadores, humanos e ambientes.


Uma combinação de três elementos essenciais define o palco para criar verdadeiras experiências de realidade mista:

  • Processamento de computadores com tecnologia da cloud
  • Métodos de entrada avançados
  • Percepções ambientais

À medida que nos movemos pelo mundo físico, os nossos movimentos são mapeados numa realidade digital. Os limites físicos influenciam experiências de realidade mista, como jogos ou orientações baseadas em tarefas numa fábrica. Com os contributos ambientais e as percepções, as experiências começam a misturar-se entre realidades físicas e digitais.



O espectro da realidade mista

A realidade mista mistura mundos físicos e digitais. Estas duas realidades marcam as extremidades polares de um espectro conhecido como continuum de virtualidade. Referimo-nos a este espectro de realidades como o espectro da realidade mista. Numa das extremidades do espectro, temos a realidade física de que nós, como seres humanos, existem. Do outro lado do espectro, temos a realidade digital correspondente.



Realidade aumentada vs. virtual

A maioria dos telemóveis no mercado tem hoje pouca ou nenhuma capacidade de percepção ambiental. As experiências que estes telemóveis oferecem não podem misturar realidades físicas e digitais.

As experiências que sobrepõem gráficos, fluxos de vídeo ou hologramas no mundo físico são denominadas realidade aumentada. As experiências que ocluem a sua vista para apresentar uma experiência digital totalmente envolvente são a realidade virtual. As experiências que podem transitar entre realidades aumentadas e virtuais formam realidade mista, onde pode:

  • Coloque um objeto digital, como um holograma, no mundo físico como se estivesse fisicamente presente.
  • Esteja pessoal e digitalmente presente no mundo físico, na forma de um avatar, para colaborar assíncronamente com outras pessoas em diferentes pontos do tempo.

Quando um utilizador está na realidade virtual, os obstáculos físicos no seu ambiente imediato, como paredes e mobiliário, são representados digitalmente dentro da experiência para que o utilizador possa evitar colidir com esses obstáculos físicos.


O espectro da realidade mista
Imagem: O espectro da realidade mista


A maioria das experiências de realidade aumentada e realidade virtual disponíveis atualmente representam um pequeno subconjunto do espectro de realidade mista maior. Windows 10 é construída com todo o espectro em mente, e permite misturar representações digitais de pessoas, lugares e coisas com o mundo real.

Dispositivos e experiências

Existem dois tipos principais de dispositivos que proporcionam experiências Windows Mixed Reality:

  1. Os dispositivos holográficos são caracterizados pela capacidade do dispositivo de apresentar objetos digitais como se existissem no mundo real.
  2. Os dispositivos VR envolventes caracterizam-se pela capacidade do dispositivo de criar uma sensação de presença bloqueando o mundo físico e substituindo-o por uma experiência digital totalmente envolvente.
Característica Dispositivos holográficos Dispositivos envolventes
Dispositivo de exemplo Microsoft HoloLens

imagem Microsoft HoloLens 2
Samsung HMD Odyssey+

Imagem samsung HMD Odyssey+
Apresentar Visualização see-through. Permite que o utilizador veja o ambiente físico enquanto utiliza os auscultadores. Ecrã opaco. Bloqueia o ambiente físico enquanto utiliza os auscultadores.
Movimento Movimento completo de seis graus de liberdade, tanto de rotação como de tradução. Movimento completo de seis graus de liberdade, tanto de rotação como de tradução.

Nota

Se um dispositivo está ligado a um PC separado (através de cabo USB ou Wi-Fi) ou sem fios não reflete se um dispositivo é holográfico ou envolvente. As funcionalidades que melhoram a mobilidade proporcionam muitas vezes melhores experiências. Os dispositivos holográficos e envolventes podem ser amarrados ou sem limites.

As experiências de realidade mista são o resultado de avanços tecnológicos. Windows 10 fornece uma plataforma de realidade mista comum para fabricantes de dispositivos e programadores. Qualquer dispositivo atualmente pode suportar um intervalo específico dentro do espectro de realidade mista. No futuro, são esperados novos dispositivos com um intervalo mais expansivo: os dispositivos holográficos serão mais envolventes e os dispositivos envolventes serão mais holográficos.


Tipos de dispositivos no espectro de realidade mista
Imagem: Onde existem dispositivos no espectro da realidade mista

Como programador de aplicações ou jogos, que tipo de experiências pretende criar? Normalmente, as experiências terão como destino um ponto ou parte específico no espectro. Terá de considerar as capacidades dos dispositivos que pretende direcionar. As experiências que dependem do mundo físico serão as melhores no HoloLens.

  • Para a esquerda (quase realidade física). Os utilizadores permanecem presentes na sua realidade física e não são obrigados a acreditar que deixaram essa realidade.
  • No meio (realidade totalmente mista). Estas experiências misturam o mundo real e o mundo digital. Por exemplo, no filme Jumanji, a estrutura física da casa onde ocorreu a história foi misturada com um ambiente de selva.
  • Para a direita (perto da realidade digital). Os utilizadores experimentam uma realidade digital e desconhecem a realidade física que os rodeia.

Próximo Ponto de Verificação de Deteção

Estás no início da jornada de descoberta que preparámos para ti e a explorar as noções básicas da realidade mista. A partir daqui, pode continuar para o próximo tópico fundamental: