Případová studie – Vytváření nemožných perspektiv pro HoloTour

Chtěli jsme, aby vaše zážitky v HoloTour Microsoft HoloLens byly nezapomenutelné. Kromě tradičních turistických zastávek jsme naplánovali několik "nemožné perspektivy" – okamžiky, které by nebylo možné na žádné prohlídce zažít, ale které bychom pomocí technologie v HoloLensu mohli přinést přímo do vašeho obývacího pokoje. Vytvoření obsahu pro tato prostředí vyžadovalo různé techniky než náš standardní proces zachytávání.

Výzva k obsahu

V prostředí HoloTour existují určité scény, jako je jízda horkovzdušným balónem nad moderním Římem a gladiatoriální boj u Koloseum ve starověkém Římě, které poskytují jedinečné pohledy, které nikde jinde neuvidíte. Tyto okamžiky jsou určeny k nadchnout a ohromit vás, aby vaše cesta přes HoloTour více než jen vzdělávací zážitek. Jsou to okamžiky, které chceme, abyste si pamatovali a byli nadšení, když o nich můžete vyprávět ostatním lidem. Vzhledem k tomu, že jsme nemohli vysunout náš fotoaparát do nebe a ještě jsme nezvládli cestování časem, každá z těchto "nemožných perspektiv" volala po speciálním přístupu k vytváření obsahu.

Informace pro pokročilé uživatele

Vytvoření těchto jedinečných okamžiků a perspektiv vyžadovalo víc než jen natáčení a střih. Trvalo to obrovské množství času, lidí s mnoha různými dovednostmi a trochu hollywoodského kouzla.

Prohlížení Říma z horkovzdušné bubliny

Od našich prvních plánovacích dnů jsme věděli, že chceme dělat letecké pohledy v HoloTour. Pohled na Řím z nebe vám poskytne pohled, který většina lidí nikdy neuvidí a pocit, jak populární památky jsou prostorově umístěny. Pokusit se zachytit to sami pomocí naší stávající kamery a mikrofon rig by bylo nesmírně obtížné, ale naštěstí jsme nemuseli.

Nejprve je důležité vysvětlit, že všechna místa, která navštívíte v HoloTour, mají pohyb v sobě. Naším cílem bylo, abyste se "cítili, jako byste tam skutečně byli" a vzhledem k tomu, že jste obklopeni pohybem všude, kam v reálném životě jdete, naše virtuální cíle potřebovaly také vyjádřit okolní pohyb. Například když navštívíte Pantheon na své cestě, uvidíte, jak lidé bloudí po celém náměstí a sdružují se na schodech. Pohyb na pozadí pomáhá, abyste se cítili, jako byste skutečně stáli na místě, a ne ve připraveném statickém prostředí.

Při vytváření leteckých pohledů pro cestu balónem jsme ve spolupráci s dalšími týmy microsoftu získali přístup k leteckým panoramatickým snímkům Říma. Kvalita těchto obrázků byla vynikající a pohled byl ohromující, ale když jsme je použili ve scénách bez úprav, cítili se bez života ve srovnání s ostatními částmi prohlídky a nedostatek pohybu byl rušivý.

Horkovzdušný balónový koš, plovoucí nad Římem.
Koš horkovzdušné balóny, plovoucí nad Římem

Abychom zajistili, že satelitní umístění splňuje stejnou kvalitu jako ostatní destinace, rozhodli jsme se statické fotografie převést na živé, pohyblivé scény. Prvním krokem bylo upravit obrázek a složený pohyb do něj. Nasmlouvali jsme umělce s vizuálními efekty, který nám s tím pomůže. Úpravy byly provedeny tak, aby ukázaly, že mraky pomalu plují, ptáci letí kolem a příležitostně letadlo nebo vrtulník procházející panorama. Na zemi byla vyrobena řada aut, která se řídila ulicemi. Pokud jste byli na turné Říma v HoloTour, je nepravděpodobné, že jste byli explicitně vědomi nějakého tohoto hnutí. To je vlastně skvělé! Tento jemný pohyb nemá za cíl upoutat vaše oko, ale bez těchto malých dotyků si lidé okamžitě všimli, že se jedná o statický obrázek ve scéně.

Druhá věc, kterou jsme udělali, bylo, že vám poskytli výhodný bod, ze kterého se můžete podívat na scénu. Nebudete mít pocit, že jste tam opravdu, pokud to vypadá, že se jen vznášíte v midair, takže jsme vytvořili 3D model balónu a umístili vás do něj. To vám umožní projít se kolem balónu a podívat se přes okraj, abyste získali lepší pohled. Zjistili jsme, že je to přirozený a zábavný způsob, jak si prožít letecké snímky.

Prostředí horkovzdušných balónů představovalo pro náš zvukový tým jedinečné výzvy, protože logistika zabránila tomu, abychom měli mikrofony, které se vznášely tisíce metrů nad Římem. Naštěstí jsme měli velké množství ambientního zvukového záznamu z celého města, které jsme byli schopni použít během postprodukce. Umístili jsme zvukové vysílače na jejich relativní místa, odkud byly zachyceny ze země. Zvuk byl pak vyfiltrován tak, aby zněl vzdáleně, jako byste ho slyšeli z pohledu někoho, kdo jede v horkovzdušné bublině, což poskytuje autentické a směrové zvukové prostředí scény.

Čas cestování do starověkého Říma

Zbytky památek a budov v celém Římě jsou působivé i dva tisíce let po jejich výstavbě, ale věděli jsme, že jsme měli jedinečnou příležitost ukázat vám, jaké by to bylo vrátit se v čase a vidět tyto struktury tak, jak se objevily ve starověkém Římě.

Samozřejmě, že neexistují žádné video nebo statické snímky Koloseum tak, jak se objevilo, když bylo postaveno, takže jsme potřebovali vytvořit vlastní. Museli jsme udělat spoustu výzkumu, abychom se dozvěděli co nejvíce o struktuře; znalost materiálů, ze kterého byla vyrobena, prohlížení architektonických diagramů a čtení historických popisů, abyste získali dostatek informací pro virtuální rekreaci.

Moderní ruiny Koloseum s překryvem, který znázorňuje podlahu arény tak, jak by vypadal ve starověkém Římě.
Moderní ruiny Koloseum s překryvem, který znázorňuje podlahu arény tak, jak by vypadala ve starověkém Římě

První věc, kterou jsme chtěli udělat, bylo vylepšit tradiční prohlídky s naučnými vrstvami. V HoloTour, když navštívíte ruiny Koloseum, jak to stojí dnes, podlaha arény je transformována tak, aby vám ukázala, jak by to vypadalo během použití, včetně propracovaných podzemních přípravných prostor. Na normální turné můžete mít tyto informace popsané a můžete se pokusit si to představit, ale v HoloTour můžete skutečně vidět.

Pro takové překrytí jsme nechali umělce, aby odpovídali pohledu našich zachycených záběrů a vytvořili překryvný obrázek ručně. Perspektiva se musí shodovat, aby se při nahrazení videa obrázkem obě správně zarovnaly.

Příprava boje gladiátora

Překryvné vrstvy představují poutavý způsob, jak učit lidi o historii, ale nejvíc nás nadchlo, že vás převezeme zpátky v čase. Překryv byl jen nehybným obrázkem z určitého pohledu, ale cestování časem by vyžadovalo modelování celého Kolosea, a jak bylo popsáno výše, potřebovali jsme pohyb ve scéně, aby se cítila živá. Dosažení tohoto cíle vyžadovalo značné úsilí.

Tento úkol byl pro náš tým příliš velký na to, aby to udělal sám, takže náš umělecký tým pracoval s Whiskytree, společností, která se zabývá externími efekty, která obvykle pracuje na vizuálních efektech pro hollywoodské filmy. Whiskytree nám pomohla znovu vytvořit Koloseum v jeho heyday, což nám umožnilo naučit vás o struktuře, zatímco stojí na podlaze arény a vytvořit pohled na gladiátor boj z císařovy krabice. Povzbuzující davy a mávající nápisy přidávají jemný pohyb potřebný k pocitu, že se jedná o skutečná místa a nejen obrázky.

Znovuvytvořené Koloseum, jak je vidět z podlahy arény. Při pohledu v HoloTour, bannery třepe ve vánku, dávají pocit pohybu.
Znovuvytvořené Koloseum, jak je vidět z podlahy arény. Při pohledu v HoloTour, bannery třepe ve vánku, dávají pocit pohybu.

Prohlídka Říma vyvrcholí bojem gladiátora. Whiskytree nám poskytl arénu a 3D simulace davu vykreslené jako video, ale potřebovali jsme přidat gladiátory na podlaze arény. Tato část našeho procesu vypadala spíše jako hollywoodská videoprodukce než projekt z inkubačního herního studia. Členové našeho týmu zmapovali drsnou bojovou sekvenci a pak ji vylepšovali pomocí tanečníka. Najali jsme herce, aby zinscenovali naši napodobenou bitvu a koupili brnění, aby se podívali na tu část. Nakonec jsme celou scénu natočili na zelené obrazovce.

Naši gladiátoři, získávání instrukcí mezi potřebami.
Naši gladiatiors, získávání instrukcí mezi

Tato scéna vás umístí do císařovy krabice, což znamenalo, že všechny záběry musely být z této perspektivy. Kdybychom natáčeli z místa, kde gladiátoři bojovali na podlaze arény, nebyli bychom později schopni správně sestavit bojovou sekvenci, takže jsme našeho kameramana umístili velmi vysokým nůžkovým zvednutím a dívali se dolů na sekvenci boje pro natáčení.

Získání správné perspektivy: natáčení z nůžkového zvedáku.
Získání správné perspektivy: natáčení z nůžkového výtahu

V postprodukci byli gladiátoři komponováni na podlahu arény a perspektiva byla správná, ale jeden problém zůstal: stíny gladiátorů na zelené obrazovce byly odstraněny v rámci procesu sestavování. Bez stínů to vypadalo, jako by gladiátoři vzlétli ve vzduchu. Whiskytree je naštěstí skvělý v řešení právě tohoto typu problému a použili trochu technických kougnictví, aby se stíny vrátily do naší scény. Výsledek je to, co dnes uvidíte v prohlídce.

O autorech

David Haley David Haley je senior vývojář, který se naučil více o kamerových zařízeních a přehrávání videa, než si myslel, že je možné od práce na HoloTour. Jason Syltebo Jason Syltebo je audio Designer, který se ujistil, že můžete zažít zvukovou krajinu každé destinace, kterou navštívíte, i když se vrátíte v čase.
Danny Askew Danny Askew je video umělec, který se ujistil, že vaše cesta přes Řím byla co nejvíce bezchybná.

Viz také