Estudo de caso – Criando perspectivas impossíveis para o HoloTour
Queríamos que suas experiências no HoloTour Microsoft HoloLens fossem inesquecíveis. Além das tradicionais paradas turísticas, planejamos algumas "perspectivas impossíveis" – momentos que seriam impossíveis de experimentar em qualquer passeio, mas que, por meio da tecnologia no HoloLens, poderíamos trazer diretamente para sua sala de estar. A criação do conteúdo para essas experiências exigia algumas técnicas diferentes do nosso processo de captura padrão.
O desafio de conteúdo
Há certas cenas na experiência do HoloTour, como o passeio de balão de ar quente sobre Roma moderna e a luta gladiatória no Coliseu na Roma antiga, que fornecem vistas únicas que você não verá em nenhum outro lugar. Esses momentos servem para excitá-lo e surpreendê-lo, tornando sua viagem pelo HoloTour mais do que apenas uma experiência educacional. São os momentos que queremos que você se lembre e fique animado para contar a outras pessoas. Como não conseguimos levar nossa câmera para o céu e ainda não dominamos as viagens no tempo, cada uma dessas "perspectivas impossíveis" exigiu uma abordagem especial para criar conteúdo.
Nos bastidores
Criar esses momentos e perspectivas exclusivos exigia mais do que apenas filmar e editar. Levou muito tempo, pessoas com muitas habilidades diferentes, e um pouco de magia hollywoodiana.
Exibindo Roma de um balão de ar quente
Desde nossos primeiros dias de planejamento, sabíamos que queríamos fazer vistas aéreas no HoloTour. Ver Roma do céu lhe dá uma perspectiva que a maioria das pessoas nunca consegue ver e uma noção de como pontos de referência populares são localizados espacialmente. Tentar capturar isso nós mesmos com nossa câmera existente e plataforma de microfone teria sido tremendamente difícil, mas felizmente não precisávamos.
Primeiro, é importante explicar que todos os locais que você visita no HoloTour têm movimento neles. Nosso objetivo era fazer você "se sentir como se estivesse realmente lá" e como você está cercado por movimentos em todos os lugares que você vai na vida real, nossos destinos virtuais precisavam transmitir movimento ambiente também. Por exemplo, quando você visita o Panteão em sua viagem, você verá pessoas vagando pela praça e se reunindo nos degraus. O movimento em segundo plano ajuda a fazer você se sentir realmente em pé no local, em vez de em um ambiente estático e preparado.
Para criar as vistas aéreas para o passeio de balão, trabalhamos com outras equipes da Microsoft para obter acesso a imagens panorâmicas aéreas de Roma. A qualidade dessas imagens era excelente e a vista era deslumbrante, mas quando as usamos nas cenas sem modificação, elas se sentiam sem vida em comparação com as outras partes do tour e a falta de movimento distraía.
A cesta de balões de ar quente, flutuando sobre Roma
Para garantir que os locais aéreos atendessem à mesma barra de qualidade que outros destinos, decidimos transformar as fotografias estáticas em cenas vivas e móveis. A primeira etapa foi editar a imagem e o movimento composto nela. Contratamos um artista de efeitos visuais para nos ajudar com isso. A edição foi feita para mostrar nuvens lentamente à deriva, pássaros voando, e um avião ou helicóptero ocasional atravessando o horizonte. No chão, vários carros foram obrigados a dirigir pelas ruas. Se você esteve na turnê de Roma em HoloTour, é improvável que você estivesse explicitamente ciente de qualquer um deste movimento. Isso é realmente ótimo! O movimento sutil não é feito para chamar sua atenção, mas sem esses pequenos toques, as pessoas notaram imediatamente que era uma imagem estática na cena.
A segunda coisa que fizemos foi dar-lhe um ponto de vista do qual ver a cena. Você não vai se sentir como se estivesse realmente lá se parecesse que você está simplesmente flutuando no ar, então criamos um modelo 3D de um balão e o colocamos dentro dele. Isso permite que você ande ao redor do balão e olhe sobre a borda para obter um ponto de vista melhor. Achamos que essa é uma maneira natural e divertida de experimentar as imagens aéreas.
A experiência do balão de ar quente apresentou desafios únicos para nossa equipe de áudio, pois a logística nos impediu de ter microfones pairando milhares de metros sobre Roma. Felizmente, tivemos uma grande quantidade de captura de áudio ambiente de toda a cidade que pudemos usar durante a pós-produção. Colocamos emissores de áudio em seus locais relativos de onde foram capturados do chão. O áudio foi então filtrado para soar distante, como se você estivesse ouvindo da perspectiva de alguém andando no balão de ar quente, fornecendo uma paisagem sonora autêntica e direcional para a cena.
Viagem no tempo para Roma antiga
Os remanescentes de monumentos e edifícios em Roma são impressionantes até dois mil anos após sua construção, mas sabíamos que tínhamos uma oportunidade única de mostrar-lhe como seria voltar no tempo e ver essas estruturas como elas apareceram na Roma antiga.
Naturalmente, não há imagens de vídeo ou imagens estáticas) do Coliseu como parecia quando foi construído, então precisávamos criar o nosso. Tivemos que fazer muitas pesquisas para aprender o máximo que pudemos sobre a estrutura; compreendendo os materiais dos quais ele foi feito, revisando diagramas arquitetônicos e lendo descrições históricas para obter informações suficientes para poder fazer uma recriação virtual.
As ruínas modernas do Coliseu com uma sobreposição mostrando o chão da arena como teria olhado na Roma antiga
A primeira coisa que queríamos fazer era melhorar os passeios tradicionais com sobreposições educacionais. No HoloTour, quando você visita as ruínas do Coliseu como está hoje, o piso da arena é transformado para mostrar como teria sido durante o uso, incluindo as elaboradas áreas de preparo subterrâneas. Em um tour normal, você pode ter essas informações descritas para você e você pode tentar imaginá-la, mas no HoloTour você pode realmente vê-la.
Para uma sobreposição como esta, nossos artistas combinam com o ponto de vista de nossas imagens de captura e criam a imagem de sobreposição à mão. A perspectiva precisa corresponder para que, quando substituímos o vídeo por nossa imagem, ambos se alinhem corretamente.
Preparando a luta do gladiador
Enquanto sobreposições são uma maneira envolvente de ensinar as pessoas sobre história, o que estávamos mais animados era transportá-lo de volta no tempo. A sobreposição era apenas uma imagem parada de um ponto de vista específico, mas viajar no tempo exigiria que todo o Coliseu fosse modelado, e, como discutido acima, precisávamos ter movimento na cena para fazê-lo se sentir vivo. Conseguir isso levou uma quantidade considerável de esforço.
Esse empreendimento era muito grande para nossa equipe fazer sozinho, então nossa equipe de arte trabalhou com a Whiskytree, uma empresa de efeitos externos que normalmente trabalha em efeitos visuais para filmes de Hollywood. Whiskytree nos ajudou a recriar o Coliseu em seu auge, permitindo-nos ensiná-lo sobre a estrutura enquanto estava no chão da arena e criar uma visão de uma luta gladiador da caixa do imperador. As multidões de torcedores e faixas acenando adicionam o movimento sutil necessário para fazer parecer que estes são lugares reais e não apenas imagens.
O Coliseu recriado como visto do chão da arena. Quando vistas no HoloTour, as faixas tremulam na brisa, dando uma sensação de movimento.
O tour por Roma culmina com a luta do gladiador. Whiskytree nos forneceu a arena e simulações de multidão 3D renderizadas como vídeo, mas precisávamos adicionar os gladiadores no chão da arena. Esta parte do nosso processo parecia mais uma produção de vídeo de Hollywood do que um projeto de um estúdio de jogos de incubação. Membros da nossa equipe mapearam uma sequência de luta áspera e, em seguida, refinaram-na com um coreógrafo. Contratamos atores para encenar nossa batalha fictícia e compramos armaduras para que eles parecessem o papel. Finalmente, filmamos toda a cena contra uma tela verde.
Nossos gladiadores, recebendo instruções entre tomadas
Esta cena coloca você na caixa do Imperador, o que significava que todas as imagens precisavam ser dessa perspectiva. Se filmássemos de onde os gladiadores estavam lutando no chão da arena, não teríamos sido capazes de compor corretamente a sequência de luta mais tarde, então colocamos nosso operador de câmera em um elevador de tesoura muito alto, olhando para baixo na sequência de luta para filmar.
Obtendo a perspectiva certa: filmando de um elevador de tesoura
Na pós-produção, os gladiadores foram compostos no chão da arena e a perspectiva estava correta, mas uma questão permaneceu: as sombras dos gladiadores na tela verde foram removidas como parte do processo de composição. Sem sombras, parecia que os gladiadores estavam flutuando no ar. Felizmente, Whiskytree é ótimo em resolver esse tipo de problema e eles usaram um pouco de assistente técnica para adicionar sombras de volta à nossa cena. O resultado é o que você vê no tour de hoje.
Sobre os autores
 |
David Haley é um desenvolvedor sênior que aprendeu mais sobre plataformas de câmera e reprodução de vídeo do que ele achava possível trabalhando no HoloTour. |  |
Jason Syltebo é um Designer de Áudio que garantiu que você pudesse experimentar a paisagem sonora de cada destino visitado, mesmo quando você voltar no tempo. |
 |
Danny Askew é um artista de vídeo que garantiu que sua jornada por Roma fosse o mais impecável possível. |