Étude de cas - Création de perspectives impossibles pour HoloTour

Nous voulions que vos expériences dans HoloTour pour Microsoft HoloLens soient inoubliables. En plus des traditionnelles escales touristiques, nous avons prévu des « perspectives impossibles » – des moments qui seraient impossibles à vivre sur n’importe quelle visite, mais que, grâce à la technologie dans HoloLens, nous pourrions apporter directement dans votre salon. La création du contenu pour ces expériences nécessitait des techniques différentes de notre processus de capture standard.

Le défi du contenu

Certaines scènes de l’expérience HoloTour, telles que la balade en montgolfière au-dessus de rome moderne et le combat de gladiateurs au Colisée dans l’ancienne Rome, offrent des vues uniques que vous ne verrez nulle part ailleurs. Ces moments sont destinés à vous exciter et à vous surprendre, faisant de votre voyage à travers HoloTour plus qu’une simple expérience éducative. Ce sont les moments dont nous voulons que vous vous souveniez et que vous soyez heureux d’en parler à d’autres personnes. Comme nous n’avons pas pu prendre notre appareil photo dans le ciel et que nous n’avons pas (encore) maîtrisé le voyage dans le temps, chacune de ces « perspectives impossibles » a appelé à une approche spéciale de la création de contenu.

Dans les coulisses

La création de ces moments uniques et de ces perspectives nécessitait plus qu’un simple tournage et montage. Il a fallu beaucoup de temps, des gens avec de nombreuses compétences différentes, et un peu de magie hollywoodienne.

Regarder Rome à partir d’une montgolfière

Dès nos premiers jours de planification, nous savions que nous voulions faire des vues aériennes dans HoloTour. Voir Rome du ciel vous donne une perspective que la plupart des gens ne peuvent jamais voir et une idée de la façon dont les monuments populaires sont situés spatialement. Essayer de capturer cela nous-mêmes avec notre appareil photo et micro existant aurait été extrêmement difficile, mais heureusement, nous n’avons pas eu à le faire.

Tout d’abord, il est important d’expliquer que tous les emplacements que vous visitez dans HoloTour contiennent des mouvements. Notre objectif était de vous faire « sentir comme si vous êtes vraiment là » et comme vous êtes entouré de mouvement partout où vous allez dans la vie réelle, nos destinations virtuelles devaient également transmettre le mouvement ambiant. Pour instance, lorsque vous visitez le Panthéon lors de votre voyage, vous verrez des gens errer sur la place et se rassemblent sur les marches. Le mouvement d’arrière-plan vous donne l’impression d’être vraiment à l’emplacement, plutôt que dans un environnement statique mis en scène.

Pour créer les vues aériennes de la balade en ballon, nous avons travaillé avec d’autres équipes de Microsoft pour avoir accès à des images panoramiques aériennes de Rome. La qualité de ces images était excellente et la vue était magnifique, mais quand nous les avons utilisées dans les scènes sans modification, ils se sentaient sans vie par rapport aux autres parties de la visite et le manque de mouvement était distrayant.

Le panier de montgolfière, flottant au-dessus de Rome.
Le panier de montgolfière, flottant au-dessus de Rome

Pour nous assurer que les emplacements aériens répondent à la même barre de qualité que d’autres destinations, nous avons décidé de transformer les photographies statiques en scènes vivantes et en mouvement. La première étape a été de modifier l’image et son mouvement composite. Nous avons passé un contrat avec un artiste d’effets visuels pour nous aider dans ce domaine. La modification a été effectuée pour montrer des nuages qui dérivent lentement, des oiseaux volant par, et un avion ou un hélicoptère occasionnel parcourant la ligne d’horizon. Sur le terrain, un certain nombre de voitures ont été fabriquées pour conduire les rues. Si vous avez fait le tour de Rome à HoloTour, il est peu probable que vous ayez été explicitement au courant de ce mouvement. C’est vraiment génial ! Le mouvement subtil n’est pas destiné à attirer votre regard, mais sans ces petites touches, les gens ont immédiatement remarqué qu’il s’agissait d’une image statique dans la scène.

La deuxième chose que nous avons faite était de vous donner un point de vue à partir duquel voir la scène. Vous n’aurez pas l’impression d’être vraiment là si vous semblez simplement flotter dans les airs, donc nous avons créé un modèle 3D d’un ballon et vous avons placé à l’intérieur de celui-ci. Cela vous permet de vous promener autour du ballon et regarder par-dessus le bord pour obtenir un meilleur point de vue. Nous avons trouvé que c’était un moyen naturel et amusant de découvrir l’imagerie aérienne.

L’expérience de la montgolfière a présenté des défis uniques pour notre équipe audio, car la logistique nous a empêché d’avoir des microphones pointant des milliers de pieds au-dessus de Rome. Heureusement, nous avons eu une grande quantité de capture audio ambiante de partout dans la ville que nous avons pu utiliser pendant la post-production. Nous avons placé des émetteurs audio à leur emplacement relatif d’où ils ont été capturés du sol. L’audio a ensuite été filtré pour qu’il sonne à distance, comme si vous l’entendiez du point de vue de quelqu’un qui montait dans la montgolfière, fournissant un paysage sonore authentique et directionnel pour la scène.

Voyage dans le temps vers l’ancienne Rome

Les vestiges de monuments et de bâtiments à travers Rome sont impressionnants même deux mille ans après leur construction, mais nous savions que nous avions une occasion unique de vous montrer ce que ce serait de remonter dans le temps et de voir ces structures telles qu’elles apparaissent dans la Rome antique.

Naturellement, il n’y a pas de séquences vidéo ou d’images statiques du Colisée tel qu’il est apparu lors de sa construction, donc nous avons dû créer notre propre. Nous avons dû faire beaucoup de recherches pour en apprendre autant que possible sur la structure; comprendre les matériaux à partir duquel il a été créé, examiner les diagrammes architecturaux et lire des descriptions historiques pour obtenir suffisamment d’informations pour pouvoir faire une récréation virtuelle.

Les ruines modernes du Colisée avec une superposition montrant le plancher de l’arène comme il aurait regardé dans la Rome antique.
Les ruines modernes du Colisée avec une superposition montrant le plancher de l’arène comme il aurait regardé dans la Rome antique

La première chose que nous voulions faire était d’améliorer les visites traditionnelles avec des superpositions éducatives. Dans HoloTour lorsque vous visitez les ruines du Colisée tel qu’il est aujourd’hui, l’étage de l’arène est transformé pour vous montrer à quoi il aurait semblé pendant l’utilisation, y compris les zones de mise en scène souterraines élaborées. Lors d’une visite guidée normale, vous pouvez avoir ces informations décrites et vous pouvez essayer de les imaginer, mais dans HoloTour, vous pouvez réellement les voir.

Pour une superposition comme celle-ci, nous avons fait correspondre nos artistes au point de vue de nos séquences de capture et créer l’image de superposition à la main. La perspective doit correspondre afin que lorsque nous remplaçons la vidéo par notre image, les deux s’alignent correctement.

Mise en scène du combat de gladiateur

Alors que les superpositions sont un moyen attrayant d’enseigner aux gens sur l’histoire, ce qui nous a le plus excité était de vous transporter dans le temps. La superposition n’était qu’une image fixe d’un point de vue particulier, mais le voyage dans le temps nécessiterait que le Colisée entier soit modélisé, et, comme nous l’avons vu plus haut, nous avions besoin de mouvement dans la scène pour qu’elle se sente vivante. Pour y parvenir, il a fallu beaucoup d’efforts.

Cette entreprise était trop importante pour que notre équipe fasse seule, donc notre équipe artistique a travaillé avec Whiskytree, une société d’effets externes qui travaille généralement sur les effets visuels pour les films hollywoodiens. Whiskytree nous a aidés à recréer le Colisée à son apogée, ce qui nous a permis de vous enseigner la structure tout en se tenant sur l’étage de l’arène et de créer une vue d’un combat de gladiateur à partir de la boîte de l’empereur. Les foules acclamantes et les bannières ondulées ajoutent le mouvement subtil nécessaire pour donner l’impression que ce sont des lieux réels et pas seulement des images.

Le Colisée recréé vu depuis l’étage de l’arène. Lorsqu’elles sont affichées dans HoloTour, les bannières flottent dans la brise, donnant une sensation de mouvement.
Le Colisée recréé vu depuis l’étage de l’arène. Lorsqu’elles sont affichées dans HoloTour, les bannières flottent dans la brise, donnant une sensation de mouvement.

La tournée de Rome culmine avec le combat des gladiateurs. Whiskytree nous a fourni l’arène et des simulations de foule 3D rendues sous forme de vidéo, mais nous devions ajouter dans les gladiateurs sur l’étage de l’arène. Cette partie de notre processus ressemblait plus à une production vidéo hollywoodienne qu’à un projet d’un studio de jeu d’incubation. Les membres de notre équipe ont tracé une séquence de combats rudes et l’ont affinée avec un chorégraphe. Nous avons engagé des acteurs pour mettre en scène notre simulacre de bataille et acheté des armures afin qu’ils regardent la partie. Enfin, nous avons filmé toute la scène sur un écran vert.

Nos gladiateurs, obtenir des instructions entre les prends.
Nos gladiateurs, obtenir des instructions entre les

Cette scène vous place dans la boîte de l’Empereur, ce qui signifiait que toutes les séquences devaient être de ce point de vue. Si nous avons filmé à partir de l’endroit où les gladiateurs se battaient sur le sol de l’arène, nous n’aurions pas été en mesure de composer correctement la séquence de combat plus tard, donc nous avons mis notre opérateur de caméra dans un très grand ascenseur en ciseaux, regardant vers le bas sur la séquence de combat pour filmer.

Obtenir la bonne perspective : filmer à partir d’un ascenseur à ciseaux.
Obtenir la bonne perspective : filmer à partir d’un ascenseur à ciseaux

En post-production, les gladiateurs ont été composites sur l’étage de l’arène et la perspective était correcte, mais un problème restait: les ombres des gladiateurs sur l’écran vert ont été supprimées dans le cadre du processus de composition. Sans ombres, il semblait que les gladiateurs flottaient dans l’air. Heureusement, Whiskytree est parfait pour résoudre ce genre de problème et ils ont utilisé un peu de sorcier technique pour rajouter des ombres dans notre scène. Le résultat est ce que vous voyez dans la visite d’aujourd’hui.

À propos des auteurs

David Haley David Haley est un développeur senior qui a appris plus sur les appareils photo et la lecture vidéo qu’il ne pensait possible en travaillant sur HoloTour. Jason Syltebo Jason Syltebo est un Designer audio qui s’est assuré que vous pouviez découvrir le paysage sonore de chaque destination que vous visitez, même lorsque vous remontez dans le temps.
Danny Askew Danny Askew est un vidéartiste qui a fait en sorte que votre voyage à travers Rome soit aussi impeccable que possible.

Voir aussi