未来のサッカー観戦は、自宅がスタジアムに変身！？

『２０１８ FIFAワールドカップ』では、日本は残念ながらベルギーに敗れて惜しくもベスト８には入ることができませんでした。決勝戦ではフランスがクロアチアを４―２で破り、自国開催だった１９９８年大会以来５大会ぶり２度目の世界一に輝きました。

そんな誰もが熱くなるサッカー観戦ですが、その観戦の仕方を根本的に覆すような新たなテクノロジーが発表されました。

それがワシントン大学のコンスタンチノス・レマタス博士（Mr．Konstantinos Rematas）が考案した『Soccer On Your Tabletop』（テーブルの上でサッカー観戦を）というものです。

発表によれば、そのテクノロジーは「サッカーゲームの2Dビデオ映像を、3DビューアまたはAR（拡張現実）装置を通じて、リアルタイムに選手や競技場をレンダリングすることで、3D映像に再構成してしまうシステム」とのこと。

つまり、通常のサッカー映像を、AR（拡張現実）技術を使ってテーブル上にリアルタイムに立体化して再現することができるというものです。そこにはAI（人工知能）の映像解析技術も導入され、あたかも自宅のリビングのテーブルの上で試合が行われているかのように観戦することができるのだそうです。

こうしたサッカー映像の3D化については、キャノンが昨年末の放送機器の展示会『Inter BEE 2017』で、自分があたかもスタジアムを自由に飛び回り、フィールド内に入り込んで選手と同じ場を疑似体験できる『自由視点映像』技術を披露しています。

撮影はサッカーの競技場を取り囲むように数１０台の高解像度4Kカメラをネットワークでつなぎ、ソフトウエアでコントロールしながら、同じタイミングで選手のドリブルやパス、シュートなどの動きを多方向から撮影。

その後、画像処理技術を用いて、撮影映像から高精細な3D空間データを構築。その3D空間で仮想カメラを自由に動かし、さまざまな視点から好みの角度で映像を見られる『自由視点映像』を生成します。

つまりこれまでは、こうした3D映像を作成するためには、サッカー場に多くのカメラを装備し、カメラを同期させ、マルチビュージオメトリ技術（multiview geometry techniques）を使用して選手や競技場を3Dで再構築する必要があったわけです。しかし、その際に多くの同期させたカメラで競技場を物理的に計測する必要があるため、実現性に乏しいものだったそうです。

それをAIによる映像解析で、2D映像に映った選手の体の厚みやポーズの予測をすることを可能にし、見事に3D化することに成功。これをマイクロソフト社の『ホロレンズ（HoloLens）』技術を応用することで、テーブル上にあたかも競技場があって、そこで選手がプレイしているかのような映像を投影するのが今回の『Soccer On Your Tabletop』というわけです。

つまりYouTubeなどに公開されている単なる2Dのサッカー映像を、この技術を駆使して読み込ませるだけで、選手の動きや人物のモデリングまでできてしまい、ユーザーはARゴーグルを通して３６０度あらゆる角度から3Dになったサッカー映像を自由に観戦することが可能になるというわけです。

すでに『Soccer On Your Tabletop』のソースコードがオープンソースで一般公開中です。ただ、現時点で完全なライブゲームをホロレンズで観られるようにするためには、リアルタイムの再構成方法と効率的なデータ圧縮とストリーミングの両方の実現が必要とのことです。

しかし、近い将来それを実現させてくれる研究者が現れるのも時間の問題！！

最初にリビングのテーブルをサッカースタジアムに変えてくれるのは、一体誰なんだ！？

---

[文・構成　土屋夏彦]