Coachella と Flume がライブコンサートの AR に全力を尽くす

2022年5月12日

YouTube で今年の Coachella のライブストリームを観てショックを受けたとしたら、それはあなただけではありません。ステージ上にそびえる巨大なオウムや群集の上に漂う金色の花など、公演の目玉となった Flume のパフォーマンスには圧倒されるようなサイケデリックなビジュアルが多数含まれていて、それを見たファンは、あれは本物だったのだろうかと疑問を抱きました。

その疑問への答えはノーです。

Coachella の主催者たちと、&Pull、Six Degrees of Freedom、All of it Now のアーティストたちは、放送品質の拡張現実 (AR) を YouTube のライブストリームに加え、パフォーマンスにリアルタイムの 3D ビジュアルを追加したいミュージシャンにとっての新しい時代を到来させました。しかし、ほかのショーとは異なり、このステージでの特別な要素は自宅でストリーミングを観る人たちだけに向けて作られたものでした。これによって、単なる 1 コンテンツであったかもしれないものが、必見のストリーミングへと変わりました。

メインステージのためのオウムの作成

Coachella を長い間観てきた人にとっては、これは驚くべきことではないかもしれません。Coachella には大きなイベントが付き物です。1999 年に始まって以来、このフェスティバルは話題になるユニークなエクスペリエンスを作り出すことで知られてきました。たとえば、有名なバンドの再結成、巨大なアートのインスタレーション、Tupac の再現などです。しかし今年は、Coachella の主催者たちはこれまでと違ったことを試みました。

Coachella のイノベーションリード、Sam Schoonover 氏は次のように述べています。「YouTube のライブストリーム向けに AR の概念実証を作ろうとしました。自宅から視聴する数百万人にとって新しく特別に感じられるものを目指しました」

最も注目を集めるのは現場でのパフォーマンスですが、一方で、Coachella を自宅で視聴する人の数が増えています。現在では、フェスティバルに参加する人よりも Coachella を自宅から視聴する人のほうが数百万人単位で多くなっており、実質的にフェスティバルのエクスペリエンスが 2 つに分かれています。これは主催者にとっては独特な課題をもたらすことでもあります。それぞれの「バージョン」の Coachella を特別なものにして、何かすごいことが起きるイベントだという評判に応えるには、どうすればいいのでしょうか。

それには実験が必要です。

幸いなことに、Flume のチームは非常に乗り気でした。

高名なアーティスト Jonathan Zawada 氏、Flume のクリエイティブチーム、ショーデザイナー John McGuire 氏と協力して、Coachella はフェスティバルのすべてのエネルギーと雰囲気を AR のデザインに取り込みました。そのデザインは、Flume の既存のツアービジュアルおよびミュージックビデオに基づいて作られました。

最先端のコンテンツ作成パイプラインの基盤として Unreal Engine が使われました。まず、アニメーションモデルを Blender、Cinema 4D、3ds Max から Unreal Engine にインポートし、ショーの前に現場で各ビジュアルをテストして調整を加えられるようにしました。承認を得られたグラフィックスを詳細な最終版のシーケンスにして、ライブストリーミングされた Flume のパフォーマンスにリアルタイムで合成しました。そのために、Unreal Engine を実行するメディアサーバー、合成プラグイン StypeLand、3 台の放送用カメラからの stYpe のトラッキングデータを利用しました。

All of it Now のプロデューサー、Berto Mora 氏は次のように述べています。「Unreal Engine のシェーダーを使って 3D オブジェクトオクルージョンシステムを開発し、舞台裏で 3D モデルを現実の寸法にスケールして合成できるようにしました。それからトリガーを作成し、バンドのタイムコードに基づいて Unreal Engine でグラフィックスを自動的に切り替えられるようにしました」

幸運なアクシデントと印象的な成果

結果は印象的なものになりました。Flume が Coachella のメインステージで Never Be Like You、Say Nothing、Tiny Cities などの曲を演奏する周囲に表示されたカラフルでサイケデリックなビジュアルが視聴者を驚嘆させました。演奏中の巨大なオウムやシュールな花のほかにも目を引くものはありました。変形するドーナツがステージから跳ねて落ちたり Spectra City のレインボータワーが地面から生えたりして、コンサートの最もつまらない部分である次の曲を待つ間にオーディエンスを楽しませました。

Six Degrees のエグゼクティブプロデューサー、Juan Santillan 氏は次のように述べています。「幸運なアクシデントもありました。たとえば、私たちは Beck がステージで Flume と共演するとは知らなかったのですが、画面上では花のグラフィックスがちょうど Beck の周りに表示され、まるでそのために作ったかのようになりました」

一方で、ステージ上ではすべてのビデオフィードへの色補正がリアルタイムで行われてからショーの AR トラックに送られ、そこで AR のビジュアルが生放送のフィードに合成されました。Unreal Engine と DMX の連携により、合成はフォトリアルなものになりました。チームはすべての仮想的なライティングをステージと同期させることすらできました。合成が済んだらビデオフィードをメインの放送トラックに戻して、Flume のショーディレクターが AR カメラからの最終成果をリアルタイムで従来のパフォーマンスと同様に編集できました。その結果、シームレスでタイミングが完璧に合ったビジュアルエクスペリエンスができあがり、ファンを音楽に没入させることができました。

Coachella のライブ AR プロデューサー、Eric Wagliardo 氏は次のように述べています。「フェスティバルのエクスペリエンスは、我を忘れるほど音楽と雰囲気に浸るためのものです。リアルタイムの AR により、自宅にいるファンを魔法の場所に連れ出し、Flume と Zawada 氏のシュールなイマジネーションを体験できるようにしました。体高 90 メートルほどの奇抜なオウムがうなずいたり、シュールな花が空中に浮いたりしていました」

コンサートのビジュアルの未来

Coachella の革新的な AR パイプラインは、Flume のセットに留まらず、自宅で視聴するファンだけでなく現地にいるファンも拡張現実のビジュアルを見ることができる未来への道を拓きました。Schoonover 氏は次のように述べています。「鳥が出てきたときのストリームのエンゲージメントはものすごいものでした。現実か CG かわからなかったようです」

Schoonover 氏にとっては、そのエンゲージメントの向上はライブショーのビジュアルにとってのターニングポイントです。これは将来のハイブリッドイベントやメタバースでのフェスティバルのテンプレートとすることができます。

「オンラインのオーディエンスが増加していくなかで、デジタルのイベントにとってはユニークな要素を加えることが重要になっています。しかし、新しいテクノロジーが現場でのエクスペリエンスにどう影響するかを考えることも重要です。今回のプロジェクトが次の時代の到来を告げるものとなることを願っています。これからは、AR グラスとバーチャルな世界によって、ファンがまったく新しい音楽のあり方を体験できるようになるでしょう」

Wagliardo 氏は次のように述べています。「私たちにとっては、この 2D から 3D への移行はモノラルからステレオへの変化と同じくらい革新的なものになります。Unreal Engine はそれを実現するための主要な一部です。Unreal Engine によって、最初から最後まで、アイデアをテストし、コンセプトのイテレーションを行い、Coachella のファンに忘れられない体験を届けるための環境を作ることができました。これは新しい未来の始まりと言えます。来年にはより多くのことに取り組みたいと考えています」

Coachellaverse の拡大

これまでは AR がメインイベントとなってきたかもしれませんが、Coachella の主催者はそこでは止まりませんでした。リアルタイムにかける意欲をフォートナイトにまで拡大し、自宅にいるファンが Coachella のエクスペリエンスに触れるための別の方法を提供しました。現地でのトレンドにインスピレーションを得たスタイルの衣服と音楽に反応する新しいアクセサリがフォートナイトユニバースに加わり、フェスティバルの楽しさと美しさを引き立たせます。また、Coachella がゲーム内の電波をジャックし、公式の Icon Radio ステーションを通じて 2022 年の Coachella に参加した 30 組以上のアーティストの曲を届けました。Coachellaverse をお楽しみください。

今すぐ Unreal Engine を入手しましょう。

世界で最もオープンで高度な制作ツールを手に入れましょう。
Unreal Engine は、すべての機能がすぐに使える状態で、すべてのソースコードにアクセスできます。

今すぐ始めましょう